阿里云文档 2025-12-02

在本地环境使用PyODPS执行SQL与DataFrame操作-云原生大数据计算服务 MaxCompute-阿里云

PyODPS是阿里云开发的Python SDK,方便开发者通过代码使用MaxCompute进行大数据处理和分析。本文将介绍如何在本地环境上使用PyODPS进行表操作、数据加载和运行SQL查询。

阿里云文档 2025-09-26

在PyODPS节点引用第三方包

当标准的PyODPS功能无法满足复杂的业务需求时,开发者需要复用已有的Python代码逻辑,或利用开源库来完成任务。为此,DataWorks 提供两种核心方案:通过资源引用灵活加载自定义脚本,或通过配置执行环境(如自定义镜像、运维助手)来集成功能强大的第三方包。本文介绍如何在DataWorks的PyODPS节点中调用自定义Python脚本或安装并使用开源第三方包,以扩展数据处理能力。

阿里云文档 2025-07-17

PyODPS 3节点使用

DataWorks为您提供PyODPS 3节点,您可以在该节点中直接使用Python代码编写MaxCompute作业,并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。

阿里云文档 2025-07-17

创建PyODPS 2节点任务

DataWorks提供了PyODPS 2节点类型,允许您使用PyODPS语法在DataWorks平台上开发PyODPS任务。PyODPS集成了MaxCompute的Python SDK,使您能够在PyODPS 2节点上直接编写和编辑Python代码来操作MaxCompute。

文章 2024-07-18 来自:开发者社区

MaxCompute产品使用合集之PyODPS Python类的开发如何用MC的资源

问题一:大数据计算MaxCompute具体是dw的什么资源呢? 独享数据集成还是调度? 大数据计算MaxCompute具体是dw的什么资源呢? 独享数据集成还是调度? 参考回答: 用的dw资源组的资源,这个例子是通过apply接口把函数序列化成UDF,然后提交到MC跑的 关于本问题的更多回答可点击原文查看:https://developer....

阿里云文档 2024-07-01

在DataWorks的PyODPS 3节点中使用MaxFrame

DataWorks为MaxCompute项目提供任务调度能力,且已在PyODPS 3节点内置了MaxFrame,您可直接使用DataWorks的PyODPS 3节点开发和运行MaxFrame作业。

问答 2023-12-31 来自:开发者社区

请问大数据计算MaxCompute使用pyodps读取mc和clickhouse表哪个更快?

请问大数据计算MaxCompute使用pyodps读取mc和clickhouse表哪个更快, 有对比吗?

问答 2023-11-07 来自:开发者社区

大数据计算MaxCompute使用pyodps 和 odpssql对mc表数据清洗处理 哪个效率高?

"1.大数据计算MaxCompute使用pyodps 和 odpssql对mc表数据进行清洗处理 哪个效率会高一些呢? 大数据计算MaxCompute的cte 产生的临时结果集 的生命周期有多长呢 可以在odps sql 节点 里面使用么?"

问答 2023-11-07 来自:开发者社区

大数据计算MaxCompu使用pyodps 和 odpssql对mc表数据进行清洗处理 哪个效率高?

"1.大数据计算MaxCompute使用pyodps 和 odpssql对mc表数据进行清洗处理 哪个效率会高一些呢? 大数据计算MaxCompute的cte 产生的临时结果集 的生命周期有多长呢 可以在odps sql 节点 里面使用么?"

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxComputepyodps相关内容

云原生大数据计算服务 MaxCompute更多pyodps相关

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注