文章 2025-07-13 来自:开发者社区

springboot项目集成dolphinscheduler调度器 实现datax数据同步任务

Datax安装及基本使用请查看上一篇文章:https://blog.csdn.net/a924382407/article/details/120952339?spm=1001.2014.3001.5501@[TOC] Datax概述 1.概述 2.功能清单 功能清单CRUD增删改查 、启动任务、停止任务 3.==说明==ÿ...

springboot项目集成dolphinscheduler调度器 实现datax数据同步任务
问答 2024-08-21 来自:开发者社区

DataWorks数据源连通性测试通过, 数据集成也可以选择到ck里的表,但是datax执行时报错?

DataWorks数据源连通性测试通过, 数据集成也可以选择到ck里的表,但是datax执行时报错:2024-08-12 16:44:57.973 [job-1612720449] ERROR RetryUtil - Exception when calling callable. Exception Msg: DataX无法连接对应的数据库,可能原因是:1) 配置的ip/port/databa....

问答 2024-07-29 来自:开发者社区

想通过拿到所有DATAWORKS下集成的DATAX任务,解析这些元数据管理咱们有对应的合适接口吗?

想通过拿到所有DATAWORKS下集成的DATAX任务,拿到同步信息信息配置。解析源数据--》目标数据源,涉及到的库、表、字段、类型信息,想对业务上游DDL变动的时候,能快速定位到对应的DATAX任务,比如有MYSQL-->ODPS 想要拿到所有指定空间下的所有DATAX任务,解析这些元数据管理咱们有对应的合适接口吗?

问答 2024-05-14 来自:开发者社区

Flink CDC有人会dolphinscheduler 集成datax吗?

Flink CDC有人会dolphinscheduler 集成datax吗?

问答 2024-05-05 来自:开发者社区

DataWorks数据集成离线同步底层组件是DataX,想请教一下实时同步用的底层组件是啥?

DataWorks数据集成离线同步底层组件是DataX,想请教一下实时同步用的底层组件是啥。实时增量采集MYSQL binlog用的是streamx 的 streamx-pump嘛?

问答 2024-04-14 来自:开发者社区

DataWorks主要是集成导入,好像是 datax的用户问题,能让我们在外面配置吗?

datax中 hadoop_username 能让我们在外面配置不?

问答 2024-03-19 来自:开发者社区

dataworks数据集成脚本模式,如果使用开源datax的transformer功能?

dataworks数据集成脚本模式,如果使用开源datax的transformer功能?

文章 2024-01-03 来自:开发者社区

BDCC - 数据集成领域的主流中间件_ Apache SeaTunnel vs Flink CDC vs DataX vs Apache Sqoop vs Apache Flume

横向比对对比项Apache SeaTunnelDataXApache SqoopApache FlumeFlink CDC部署难度容易容易中等,依赖于 Hadoop 生态系统容易中等,依赖于 Hadoop 生态系统运行模式分布式,也支持单机单机本身不是分布式框架,依赖 Hadoop MR 实现分布式分布式,也支持单机分布式,也支持单机健壮的容错机制无中心化的高可用架构设计,有完善的容错机制易受比....

BDCC - 数据集成领域的主流中间件_ Apache SeaTunnel vs Flink CDC vs DataX vs Apache Sqoop vs Apache Flume
文章 2023-12-25 来自:开发者社区

dataworks离线数据集成,源库或目标库是MC时,走的是Tunnel? 还是走的是datax啊?

DataWorks数据集成在离线同步场景下支持各种类型和网络环境下的数据同步,包括数据库、数仓、NoSQL数据库、文件存储、消息队列等近50多种不同异构数据源之间的数据同步。当源库或目标库是MC时,DataWorks离线数据集成会通过DataX这个阿里云 DataWorks数据集成的开源版本来进行数据的读取和写入。DataX被广泛应用于阿里巴巴集团内,实...

问答 2023-12-24 来自:开发者社区

dataworks离线数据集成,源库或目标库是MC时,走的是Tunnel? 还是走的是datax啊?

dataworks离线数据集成,源库或目标库是MC时,走的是Tunnel? 还是走的是datax啊?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。