文章 2024-09-06 来自:开发者社区

基于阿里云Hologres和DataWorks数据集成的方案

作为程序员,我对数据库和数据分析技术有一定的了解和实践经验。 方案内容:多源集成,极致性能,搭建轻量OLAP分析平台https://www.aliyun.com/solution/tech-solution/hologres-olap?spm=a2c6h.29569386.J_9175035460.3.556d3538P6T2gq 基于阿里云Hologres和DataWorks数据集成...

基于阿里云Hologres和DataWorks数据集成的方案
问答 2024-08-19 来自:开发者社区

顺丰最初是如何实现实时数据集成方案的?

顺丰最初是如何实现实时数据集成方案的?

文章 2024-01-22 来自:开发者社区

基于 Flink CDC 打造企业级实时数据集成方案

$stringUtil.substring( $!{XssContent1.description},200)...

基于 Flink CDC 打造企业级实时数据集成方案
文章 2023-12-26 来自:开发者社区

Kafka Connect :构建强大分布式数据集成方案

Kafka Connect 是 Apache Kafka 生态系统中的关键组件,专为构建可靠、高效的分布式数据集成解决方案而设计。本文将深入探讨 Kafka Connect 的核心架构、使用方法以及如何通过丰富的示例代码解决实际的数据集成挑战。 Kafka Connect 的核心架构 Kafka Connect 的核心架构由 Connect 运行器、任务和连接器组成。理解这些组件如何协同工作...

Kafka Connect :构建强大分布式数据集成方案
文章 2023-11-29 来自:开发者社区

基于 Flink CDC 打造企业级实时数据集成方案

本文整理自阿里云智能 Flink 数据通道负责人,Flink CDC 开源社区负责人,Flink PMC Member & Committer 徐榜江在 2023 云栖大会开源大数据专场的分享。本篇内容主要分为三部分: 一、CDC 数据实时集成的挑战 二、Flink CDC 核心技术解读 三、基于 Flink CDC 的企业级实时数据集成方案 CDC 数据实时集成的挑战...

基于 Flink CDC 打造企业级实时数据集成方案
问答 2023-06-10 来自:开发者社区

DataWorks选择网络连通方案使用独享数据集成资源组怎么办?

DataWorks选择网络连通方案使用独享数据集成资源组怎么办?

文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——1.数据集成——37手游-基于 Flink CDC + Hudi 湖仓一体方案实践

作者:徐润柏 用户背景 37手游着重强化自身游戏运营能力、市场推广能力、广告设计能力,提出了立体化、AI智能化营销的“流量经营”策略。37手游秉承“创新点亮梦想,分享成就未来”和“相信创造奇迹”的文化理念,强调创新、分享、自信、梦想和追求的经营理念。 业务需求37手游的原有技术架构如上图所示,主要存在如下业务痛点:...

《Apache Flink 案例集(2022版)》——1.数据集成——37手游-基于 Flink CDC + Hudi 湖仓一体方案实践
问答 2023-05-22 来自:开发者社区

DataWorks数据集成中,MySQL同步至Hologres的整库全增量方案创建的实时同步任务,?

DataWorks数据集成中,MySQL同步至Hologres的整库全增量方案创建的实时同步任务,在运维中心里面找不到?这个是特性还是bug

问答 2023-03-14 来自:开发者社区

DataWorks如何选择网络连通方案使用独享数据集成资源组?

DataWorks如何选择网络连通方案使用独享数据集成资源组?

文章 2023-02-01 来自:开发者社区

如何选择离线数据集成方案-全量&增量

1前言我在上一篇中介绍了实时集成与离线集成该怎么选择,接着介绍一下离线集成中的增量与全量的选择问题。要设计方案,我们先分析一下数据产生的方式。我们把音视频流这种非结构化的数据集成从这里排除出去,因为这种音视频流一般都是专业的厂商和系统来处理。我们围绕数据分析领域常见的半结构化、结构化数据来看。结构化和半结构化数据主要来源于各种设备和系统中运行的软件&#x...

如何选择离线数据集成方案-全量&增量

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注