阿里云文档 2024-09-06

StarRoks如何通过DataWorks将日志数据与用户数据同步至SatrRocks数据源。

本教程以MySQL中的用户基本信息ods_user_info_d表和OSS中的网站访问日志数据user_log.txt文件为例,通过数据集成离线同步任务分别同步至StarRocks的ods_user_info_d_starrocks、ods_raw_log_d_starrocks表。旨在介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据同步操作。

问答 2024-08-25 来自:开发者社区

DataWorks在数据集成,整库同步时PolarDB-PG做为数据源是不支持吗?

DataWorks在数据集成,整库同步时PolarDB-PG做为数据源,提示”Only support polardb for mysql,current dbType is:PostgreSQL“;是不支持吗?如果将 PolarDB-PG 配置为postgresql数据库的话,可以整库实时同步吗?

阿里云文档 2024-08-02

一种利用MySQL数据源与OSS HDFS数据源实现实时入湖iceberg的方法

本文以MySQL实时入湖写入OSS-HDFS场景为例,为您介绍如何通过数据集成的方式,实时入湖。

阿里云文档 2024-07-23

如何创建SSH数据源

在DataWorks中,您可通过创建SSH数据源并配置主机访问信息的方式远程访问主机,随后,SSH节点可通过该数据源远程访问主机并触发主机脚本执行。例如,您可通过此方式实现在DataWorks远程访问ECS(Elastic Compute Service)并触发ECS中的脚本周期性调度执行。本文为您介绍如何创建SSH数据源。

阿里云文档 2024-07-16

DataWorks中添加工作空间和数据源的流程

部署流程阶段工作空间配置: 在DataWorks资源属性中点击按钮进行配置数据源配置:在工作空间属性中配置配置完成点击确认重要属性配置层级关系:DataWorks -> 工作空间配置 -> 数据源配置部署完成操作阶段工作空间配置:双击部署成功的DataWorks节点,打开详情页进行配置工作空间配置点...

问答 2024-06-23 来自:开发者社区

DataWorks只有PolarDB这一个库会报这个错数据源连通性是正常的怎么办?

DataWorks只有PolarDB这一个库会报这个错数据源连通性是正常的?

阿里云文档 2024-06-03

Azure Blob Storage数据同步能力支持情况

Azure Blob Storage数据源为您提供读取文件的能力,您可以使用本数据源,获取Azure Blob Storage中存储的文件,解析并同步至任意目标数据源。本文为您介绍DataWorks的Azure Blob Storage数据同步的能力支持情况。

问答 2023-07-30 来自:开发者社区

DataWorks数据集成部分可以同步单库单表吗? 数据源编辑页面只有整库的!

DataWorks数据集成部分可以同步单库单表吗? 数据源编辑页面只有整库的

问答 2023-07-11 来自:开发者社区

DataWorks 这个位置可以按库同步吗?就是A数据源对应库的若干张表同步到B数据源下的若干张表,

DataWorks 这个位置可以按库同步吗?就是A数据源对应库的若干张表同步到B数据源下的若干张表,两个库里面的表结构都是一样的

问答 2023-04-04 来自:开发者社区

咨询一下,dataworks数据集成中遇到的一个同库分表的同步问题,数据源是mysql, 表是按月生

咨询一下,dataworks数据集成中遇到的一个同库分表的同步问题,数据源是mysql, 表是按月生成的, 比如xxx_202303,一个月新增一张表,这种应该怎么配置离线同步任务啊,似乎脚本模式里也只能按指定范围来配置?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks数据源相关内容

大数据开发治理平台 DataWorks更多数据源相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注