阿里云文档 2025-11-25

创建一个具备AI处理能力的数据集成任务

该功能在DataWorks数据集成链路中,原生集成了AI大模型处理能力。它将传统的数据同步从简单的“搬运”升级为智能的“加工”,允许用户在数据从源到端的传输过程中,实时调用AI模型对流经的数据进行内容分析、处理与增强,在数据流转的过程中释放非结构化数据的隐藏价值。

阿里云文档 2025-09-23

DataWorks数据集成对接DLF Paimon Catalog

如何在阿里云DataWorks数据集成服务通过Paimon REST将数据导入至DLF Catalog。

阿里云文档 2025-08-13

数据集成创建数据源

数据源用于连接各类数据库和存储服务(如MaxCompute、MySQL、OSS等),是数据集成同步任务的必备配置,决定任务读取(数据来源)和写入(数据去向)的数据库。

阿里云文档 2025-06-06

如何通过数据集成操作扩展点触发扩展程序校验的过程

在DataWorks开放平台中,成功注册、上线并启用扩展程序后,在该扩展程序所生效的工作空间中,使用页面部分功能(即触发扩展点事件)时,DataWorks会将事件消息发送至您的扩展程序,您可以查看扩展程序返回的结果。本文将为您介绍数据集成支持的扩展点事件,以及使用扩展点触发扩展程序校验的操作过程。

问答 2024-08-25 来自:开发者社区

dataworks做数据集成 用oss做数据源的话 支不支持跨资源组?

dataworks做数据集成 用oss做数据源的话 支不支持跨资源组?

问答 2024-08-25 来自:开发者社区

DataWorks在数据集成,整库同步时PolarDB-PG做为数据源是不支持吗?

DataWorks在数据集成,整库同步时PolarDB-PG做为数据源,提示”Only support polardb for mysql,current dbType is:PostgreSQL“;是不支持吗?如果将 PolarDB-PG 配置为postgresql数据库的话,可以整库实时同步吗?

文章 2024-07-17 来自:开发者社区

DataWorks产品使用合集之数据集成时源头提供数据库自定义函数调用返回数据,数据源端是否可以写自定义SQL实现

问题一:dataworks场景:依赖的节点已经实际跑数成功。但是显示未运行,导致依赖的下游部分节点未跑批? dataworks场景:依赖的节点已经实际跑数成功。但是显示未运行,导致依赖的下游部分节点未跑批? 参考回答: 这种情况可能是由于以下原因导致的: 依赖的节点运行时间过长,超过了下游节点的等待时间。在这种情况下,下游节点会认为...

问答 2024-06-30 来自:开发者社区

在dataworks的数据集成的节点,但是新增数据源的时候没有Prometheus怎么办?

在dataworks的数据集成的节点,数据来源可以选Prometheus,但是新增数据源的时候没有Prometheus?

问答 2024-06-27 来自:开发者社区

DataWorks 数据集成数据源ES的search配置能否使用上下文参数?若能,应该如何使用。

上游节点:赋值节点nowday_format(将今天、昨天的标准时间转为时间戳(毫秒级))当前节点:数据集成任务(从es读取数据放入MaxCompute中)赋值节点的SQL手动跑过能够执行,并且都发布到生产环境后,选取这两个任务,进行补数据。数据集成的日志如下:2024-06-27 15:39:46 INFO SKYNET_PARAVALUE=bizdate=20240625 start_tim....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks数据集成相关内容

大数据开发治理平台 DataWorks更多数据集成相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注