文章 2025-07-13 来自:开发者社区

springboot项目集成dolphinscheduler调度器 实现datax数据同步任务

Datax安装及基本使用请查看上一篇文章:https://blog.csdn.net/a924382407/article/details/120952339?spm=1001.2014.3001.5501@[TOC] Datax概述 1.概述 2.功能清单 功能清单CRUD增删改查 、启动任务、停止任务 3.==说明==ÿ...

springboot项目集成dolphinscheduler调度器 实现datax数据同步任务
问答 2024-08-21 来自:开发者社区

DataWorks运行在 公共数据集成(调试)资源组中的数据集成任务,应该有两部分收费?

DataWorks运行在 公共数据集成(调试)资源组中的数据集成任务,应该有两部分收费?一部分是调度费用,一部分是计算(公网流量费用) ;公网流量费用怎么看呢?

问答 2024-08-21 来自:开发者社区

DataWorks怎么计算旧的数据集成任务 在 公共数据集成资源组,的使用情况呢?

DataWorks怎么计算旧的数据集成任务 在 公共数据集成资源组,的使用情况呢?

问答 2024-08-21 来自:开发者社区

DataWorks计划切换独享数据集成资源组,怎么评估旧的数据集成任务在公共数据集成(调试)资源组的

DataWorks计划切换独享数据集成资源组,怎么评估旧的数据集成任务在公共数据集成(调试)资源组的使用资源情况呢?

问答 2024-08-21 来自:开发者社区

DataWorks数据源连通性测试通过, 数据集成也可以选择到ck里的表,但是datax执行时报错?

DataWorks数据源连通性测试通过, 数据集成也可以选择到ck里的表,但是datax执行时报错:2024-08-12 16:44:57.973 [job-1612720449] ERROR RetryUtil - Exception when calling callable. Exception Msg: DataX无法连接对应的数据库,可能原因是:1) 配置的ip/port/databa....

问答 2024-07-29 来自:开发者社区

想通过拿到所有DATAWORKS下集成的DATAX任务,解析这些元数据管理咱们有对应的合适接口吗?

想通过拿到所有DATAWORKS下集成的DATAX任务,拿到同步信息信息配置。解析源数据--》目标数据源,涉及到的库、表、字段、类型信息,想对业务上游DDL变动的时候,能快速定位到对应的DATAX任务,比如有MYSQL-->ODPS 想要拿到所有指定空间下的所有DATAX任务,解析这些元数据管理咱们有对应的合适接口吗?

文章 2024-07-17 来自:开发者社区

DataWorks产品使用合集之如何通过数据集成将API接口产生的数据集成到DataWorks

问题一:dataworks提供的数据格式,是API接口产生的数据。这个参数是在哪里配置? dataworks提供的数据格式,是API接口产生的数据。现在是要把这个数据集成到datawork。这个参数是在哪里配置? 参考回答: 直接集成原始数据的话 一般是不处理 处理在集成以后,然后使用hive sql语句处理 关于本问题的更多回答可...

DataWorks产品使用合集之如何通过数据集成将API接口产生的数据集成到DataWorks
问答 2024-06-17 来自:开发者社区

新买了个dataworks,做数据集成的时候,为啥不能使用公共数据集成资源组喃?

新买了个dataworks,做数据集成的时候,为啥不能使用公共数据集成资源组喃?

文章 2024-06-10 来自:开发者社区

DataWorks操作报错合集之数据集成使用公共数据集成资源组写入到redis数据源(使用的是VPC连接),提示以下错误:request action:[InnerVpcGrantVpcInstanceAccessToApp], message:[InvalidInstanceId.怎么解决

问题一:在dataworks配置ES到odps的离线同步时,报错index type is need? 在dataworks配置ES到odps的离线同步时,报错index type is need。 参考回...

DataWorks操作报错合集之数据集成使用公共数据集成资源组写入到redis数据源(使用的是VPC连接),提示以下错误:request action:[InnerVpcGrantVpcInstanceAccessToApp], message:[InvalidInstanceId.怎么解决
问答 2024-05-14 来自:开发者社区

Flink CDC有人会dolphinscheduler 集成datax吗?

Flink CDC有人会dolphinscheduler 集成datax吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注