阿里云文档 2026-02-04

在PyODPS节点引用第三方包

当标准的PyODPS功能无法满足复杂的业务需求时,开发者需要复用已有的Python代码逻辑,或利用开源库来完成任务。为此,DataWorks 提供两种核心方案:通过资源引用灵活加载自定义脚本,或通过配置执行环境(如自定义镜像、运维助手)来集成功能强大的第三方包。本文介绍如何在DataWorks的PyODPS节点中调用自定义Python脚本或安装并使用开源第三方包,以扩展数据处理能力。

阿里云文档 2026-02-04

大模型数据处理节点

在传统的数据工作流中,处理像用户评论、产品描述、客服日志等非结构化文本数据一直是一项挑战。您现在可以直接在DataWorks的工作流中,利用强大的大语言模型(LLM)能力,通过自然语言指令,轻松完成文本摘要、情感分析、内容分类、信息提取等复杂的AI任务。这极大地简化数据处理流程,让数据工程师和分析师无需编写复杂的算法,即可将AI能力无缝集成到现有的ETL(数据抽取、转换、加载)链路中。

阿里云文档 2025-10-28

在节点、个人开发环境中使用数据集

在节点(Shell节点、Python节点、Notebook节点)中使用数据集,以便在数据开发过程中读写NAS或OSS存储中的数据。也可以在创建个人开发环境时,将数据集作为个人开发环境实例的存储。

阿里云文档 2025-07-15

数据推送节点

数据推送节点可将Data Studio业务流程中其他节点产生的数据查询结果,通过新建数据推送目标,将数据推送至钉钉群、飞书群、企业微信群、Teams以及邮件,便于团队成员及时接收和关注最新数据情况。

阿里云文档 2025-06-13

PAI Flow的配置与运维

PAI Flow提供端到端机器学习流程开发能力,可实现与人工智能平台 PAI 的可视化建模 Desiger相同的工作流功能,并能周期性调度工作流。

问答 2024-08-25 来自:开发者社区

DataWorks未发布的节点在哪里可以看到运行记录?

DataWorks未发布的节点在哪里可以看到运行记录?

问答 2024-08-25 来自:开发者社区

DataWorks这是什么原因呀,换了一个数据库链接没问题,在另一个节点运行这个数据库链接也没问题?

DataWorks这是什么原因呀,换了一个数据库链接没问题,在另一个节点运行这个数据库链接也没问题?

问答 2024-08-25 来自:开发者社区

DataWorks数据工程是否具有一些功能,如果计划节点未在预期的计划时间运行,您将收到通知?

DataWorks数据工程是否具有一些功能,如果计划节点未在预期的计划时间运行,您将收到通知?

问答 2024-08-25 来自:开发者社区

Dataworks的各任务节点,有同时运行的任务数量限制吗?

Dataworks的各任务节点,有同时运行的任务数量限制吗,比如 datax任务,同时运行的任务只能有10个,剩下的任务就阻塞了,等10个队列空出来一个才能进行运行?

问答 2024-08-25 来自:开发者社区

在dataworks上需要判断mysql数据量来决定下游节点是否运行?

在dataworks上需要判断mysql数据量来决定下游节点是否运行?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks节点相关内容

大数据开发治理平台 DataWorks更多节点相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注