阿里云文档 2025-01-16

DataWorks调度Spark

DataWorks提供全链路大数据开发治理能力,支持包括AnalyticDB在内的多种计算引擎。DataWorks数据开发(DataStudio)模块支持工作流可视化开发和托管调度运维,能够按照时间和依赖关系轻松实现任务的全面托管调度。您可以在DataWorks中通过ADB Spark SQL和ADB Spark节点开发和调度Spark作业(Spark SQL作业和Spark应用作业)。

阿里云文档 2024-12-06

一种利用MySQL数据源与OSS HDFS数据源实现实时入湖的方法

本文以MySQL实时入湖写入OSS-HDFS场景为例,为您介绍如何通过数据集成的方式,实时入湖。

问答 2024-11-28 来自:开发者社区

mysql中有BLOB类型数据,同步至dataworks需要用什么类型接收

mysql中有BLOB类型数据,同步至dataworks需要用什么类型接收

阿里云文档 2024-10-28

MySQL-Hologres的Serverless整库实时任务

本文介绍MySQL-Hologres的Serverless整库实时任务。

阿里云文档 2024-09-24

通过OpenAPI创建MySQL到Hologres的整库实时同步任务

本文介绍如何使用OpenAPI实现从MySQL数据源到Hologres目标源的整库实时数据同步。通过本文,您将学会如何创建、启动、监控、停止以及删除数据集成任务,确保数据在两个系统间高效准确地同步流转,并掌握妥善管理这些任务的方法,包括适时停止与彻底删除不再需要的任务。

阿里云文档 2024-09-24

分区数据批量同步到以分区名为特征的MySQL表中

本文利用DataWorks赋值节点与for-each节点的特性,实现将MaxCompute中以年月日和地域划分的二级分区数据,批量同步到以二级分区内容为特征的MySQL表中,本文以「年月日_地域」为后缀特征介绍。

问答 2024-07-29 来自:开发者社区

DataWorks用python3 节点跑任务 ,source节点是 mysql 怎么办?

DataWorks用python3 节点跑任务 ,source节点是 mysql ,输出到 holo 里面 就执行不了?

问答 2024-07-29 来自:开发者社区

DataWorks中maxcompute写入数据时有没有类似Mysql的replaceinto函数?

DataWorks中maxcompute写入数据时有没有类似Mysql的replace into函数,根据主键覆盖写入?

问答 2024-07-23 来自:开发者社区

DataWorks离线同步配置源MySQL里,怎么配置2个不同数据字段结构的表?

DataWorks离线同步配置源MySQL里,怎么配置2个不同数据字段结构的表?

问答 2024-07-23 来自:开发者社区

DataWorks整库离线同步mysql->maxCompute,54张表,这个资源组能支撑的住吗?

DataWorks整库离线同步mysql->maxCompute,54张表,拆分成了两个同步任务,现在增量同步,周期5分钟一次,任务一是平均1-2分钟,任务二是平均2-3分钟。资源组是2个CU,如果我再加一个差不多库同步,这个资源组能支撑的住吗?这是我现在的资源组使用率

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据库

数据库领域前沿技术分享与交流

+关注
相关镜像