阿里云文档 2026-02-04

在PyODPS节点引用第三方包

当标准的PyODPS功能无法满足复杂的业务需求时,开发者需要复用已有的Python代码逻辑,或利用开源库来完成任务。为此,DataWorks 提供两种核心方案:通过资源引用灵活加载自定义脚本,或通过配置执行环境(如自定义镜像、运维助手)来集成功能强大的第三方包。本文介绍如何在DataWorks的PyODPS节点中调用自定义Python脚本或安装并使用开源第三方包,以扩展数据处理能力。

阿里云文档 2026-02-04

大模型数据处理节点

在传统的数据工作流中,处理像用户评论、产品描述、客服日志等非结构化文本数据一直是一项挑战。您现在可以直接在DataWorks的工作流中,利用强大的大语言模型(LLM)能力,通过自然语言指令,轻松完成文本摘要、情感分析、内容分类、信息提取等复杂的AI任务。这极大地简化数据处理流程,让数据工程师和分析师无需编写复杂的算法,即可将AI能力无缝集成到现有的ETL(数据抽取、转换、加载)链路中。

阿里云文档 2025-10-28

在节点、个人开发环境中使用数据集

在节点(Shell节点、Python节点、Notebook节点)中使用数据集,以便在数据开发过程中读写NAS或OSS存储中的数据。也可以在创建个人开发环境时,将数据集作为个人开发环境实例的存储。

阿里云文档 2025-07-15

数据推送节点

数据推送节点可将Data Studio业务流程中其他节点产生的数据查询结果,通过新建数据推送目标,将数据推送至钉钉群、飞书群、企业微信群、Teams以及邮件,便于团队成员及时接收和关注最新数据情况。

阿里云文档 2025-06-13

PAI Flow的配置与运维

PAI Flow提供端到端机器学习流程开发能力,可实现与人工智能平台 PAI 的可视化建模 Desiger相同的工作流功能,并能周期性调度工作流。

问答 2024-07-15 来自:开发者社区

DataWorks在生产环境将调度任务下线了,如何重新恢复上线,开发环境的节点未删除怎么办?

DataWorks在生产环境将调度任务下线了,如何重新恢复上线,开发环境的节点未删除,但是无法提交,稍微修改下原节点可以提交,但是提交后调度任务下载代码失败?

问答 2024-06-24 来自:开发者社区

DataWorks在下线节点的时候,报存在子节点,但是我确认子节点已经下线了,这个应该怎么解决呢?

DataWorks在下线节点的时候,报存在子节点,但是我确认子节点已经下线了,下游不存在节点了,这个应该怎么解决呢?

问答 2024-05-05 来自:开发者社区

DataWorks这之前是上线了,然后没有下线删除了业务节点,现在提交报这个错误,这是什么情况?

DataWorks这之前是上线了,然后没有下线删除了业务节点,现在提交报这个错误,按照这错误点发布,但是点了发布没有用,这是什么情况?

文章 2023-12-06 来自:开发者社区

DataWorks运维中心提供了下线节点、优雅下线和下线任务三种下线方式

DataWorks运维中心提供了下线节点、优雅下线和下线任务三种下线方式。下线节点是针对特定节点的下线操作,可以通过DataStudio界面进行简单模式删除或标准模式发布下线操作。而优雅下线则是一种更为复杂的下线流程,除了支持对单个工作空间下的任务进行管理外,还增加了下线影响分析、下线过程管理等功能,可以在各个阶段通过多种方式给任务相关人员...

问答 2023-12-03 来自:开发者社区

DataWorks就是我需要下线这个ods节点,开发环境删了,请问这种一般是什么原因呢?

DataWorks就是我需要下线这个ods节点,开发环境删了,发的的时候一直显示他有子节点,但是我打开子节点的时候,并没有看到子节点有依赖这个ods删除的节点,请问这种一般是什么原因呢?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks节点相关内容

大数据开发治理平台 DataWorks更多节点相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注