阿里云文档 2024-07-25

如何通过DataWorks数据集成同步异构数据源间的数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据采集操作。

问答 2024-07-17 来自:开发者社区

大数据计算MaxCompute的dataX离线同步,针对业务表太大的情况,内部会分页循环嘛?

大数据计算MaxCompute的dataX离线同步,针对业务表太大的情况,内部会分页循环嘛,内部有优化机制嘛?

问答 2024-03-21 来自:开发者社区

大数据计算MaxCompute目前公网datax中的jdbc版本是多少?

大数据计算MaxCompute目前公网datax中的jdbc版本是多少?

阿里云文档 2024-01-17

如何同步LogHub数据至MaxCompute

本文为您介绍如何通过数据集成功能同步LogHub数据至MaxCompute。

阿里云文档 2024-01-03

MaxCompute数据集成的实现方案

MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute,数据集成作业主要有三种类型:离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。

问答 2023-12-24 来自:开发者社区

大数据计算MaxCompute datax如果上云后,这个性能是这样,差距太大了?

大数据计算MaxCompute datax单并发 odpsreader是50MB/s,tunnel单并发是207KB/s,差了不是一点点,这个影响对我们较大,之前我们都是用自己搭建的datax的,如果上云后,这个性能是这样,差距太大了?

问答 2023-12-24 来自:开发者社区

大数据计算MaxCompute这里说Tunnel读mc的性能比datax 低20倍以上,什么原因?

$stringUtil.substring( $!{XssContent1.description},200)...

问答 2023-11-19 来自:开发者社区

大数据计算MaxCompute是不是datax脚本的语法不一样?

大数据计算MaxCompute es可以通过update_time去查询过滤数据,是不是datax脚本的语法不一样? 我在这个search里写march_all是可以拉取的, 如果我要拉取update_time>=2023-10-01 00:00:00 及 update_time

阿里云文档 2023-10-26

如何使用DataWorks数据集成同步功能

本文为您介绍如何使用DataWorks数据集成同步功能自动创建分区,动态地将RDS中的数据迁移至MaxCompute大数据计算服务。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注