安装模板转换工具
前提条件 模板转换工具使用Python语言开发，请确保您已经安装Python 3.6及以上版本。更多信息，请参见 Python。方式一：通过pip安装 执行以下命令，安装模板转换工具。pip install alibabacloud-ros-tran 方式二：通过源码安装 执行以下...
连接并使用实例
引擎类型 连接方式 参考文档 宽表引擎 通过Lindorm宽表SQL连接宽表引擎 基于Java JDBC接口的应用开发 基于Python DB-API的应用开发 通过Lindorm-cli连接并使用宽表引擎 通过HBase API连接宽表引擎 基于HBase Java API的应用开发 基于HBase...
数据科学计算概述
背景信息 Python作为目前机器学习、AI模型开发的主流编程语言，提供了如NumPy、SciPy、Scikit-Learn、Matplotlib等丰富的科学计算、可视化库，用于数据科学和数据分析。同时支持TensorFlow、PyTorch、XGBoost、LightGBM等丰富的训练框架。...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
功能与优势
开发效率 作业开发 多语言支持：一站式开发管理平台，包括SQL、Java、Scala和Python语言。您无需自己搭建或者对接开源。Flink SQL简单易懂，整体开发环境上手便捷。多版本支持：支持主流Flink版本，包括多版本作业代码比较和回滚。提供...
概述
使用Python语言开发产品时，您可使用物联网平台提供的Python SDK，简化开发过程，使设备快速接入物联网平台。本文简要介绍Python SDK的使用说明和功能介绍。使用说明 Python SDK分为Paho-SDK和Link SDK两个系列。Paho-MQTT Python 基于开源...
新功能发布记录
2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行，新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目管理 功能名称 功能描述 发布时间 相关文档 关联设备 支持一...
部署作业
完成作业开发后，您需要将作业部署。部署将开发和生产隔离，部署后不影响运行中的作业，只有（重新）启动后才会正式上线运行。本文为您介绍如何部署SQL作业、JAR作业和Python作业。前提条件 已完成作业开发。SQL作业开发，详情请参见 SQL...
JavaScript和Python双引擎运行环境
更正文档 案例简介 Python轻应用引擎 py_engine（Python轻应用引擎）以MicroPython为基础打造而成，基于py_engine可以快速实现IoT场景连云、控端、AI等最常见功能。快速上手文档和编程接口请参考 Python轻应用快速上手。连云：支持基于...
功能发布记录（2023年~2024年）
本文介绍 Serverless 应用引擎 SAE（Serverless App Engine）2023年发布涉及的功能新增、优化、重要问题修复及对应的文档，帮助您了解 SAE 的发布动态。2024年03月30日 功能名称 变更类型 功能描述 相关文档 统一概览页 优化 除微服务外，...
Flink SQL作业快速入门
Python作业完整的开发流程示例，请参见 Flink Python作业快速入门。数据库实时入仓完整的操作流程示例，请参见 数据库实时入仓快速入门。完成SQL作业部署上线后，您可以使用自动调优功能，提升资源利用率，请参见 配置自动调优。基于Flink+...
Flink Python作业快速入门
Flink控制台不提供Python包的开发平台，因此您需要在线下完成Python包的开发。Python作业的开发方法，调试及连接器的使用等详情请参见 Python作业开发。步骤二：上传Python文件 登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台...
部署Java Web开发测试环境
资源编排服务ROS（Resource Orchestration Service）支持通过创建资源栈的方式一键部署Java Web开发测试环境。背景信息 ROS模板示例 部署Java Web开发测试环境 基于Centos7系统创建ECS实例并安装Tomcat与JDK（Java Development Kit）应用。...
物模型数据解析使用示例
本文以解析上、下行属性数据的脚本为例，介绍为数据格式为透传/自定义的产品...查看Python 2.7脚本模板和示例，请参见 Python脚本示例。查看PHP 7.2脚本模板和示例，请参见 PHP脚本示例。了解数据解析流程等基本信息，请参见 透传/编辑脚本。
2020年
2020-07-24 全部区域 UDF开发（Python2）UDF开发（Python3）新增聚合函数 MaxCompute新增聚合函数 APPROX_DISTINCT(value)、ANY_VALUE(value)、ARG_MAX(valueToMaximize,valueToReturn)和 ARG_MIN(valueToMinimize,valueToReturn)。...
什么是Serverless应用引擎？
Serverless 应用引擎 SAE（Serverless App Engine）是一款零代码改造、极简易用、自适应弹性的应用全托管平台。SAE 能够让您免运维IaaS和K8s，秒级完成从源代码、代码包、Docker镜像部署任意语言的在线应用（例如Web、微服务、Job任务）到 ...
CR模板使用指南
功能开发模板 适用于新功能开发的代码评审。该模板的示例如下：#需求概括!简洁总结该需求功能->#需求来源和功能描述!该需求和功能主要解决什么问题？需求功能的实现方案是什么？如何实现该需求功能？新功能的测试用例是否补齐？涉及了...
安装宽表SQL Driver
Python Lindorm面向Python语言应用开发提供了遵循Python语言 DB-API 接口规范的Driver。关于该Driver的安装和使用，请参见 使用Python DB-API的应用开发。SQL的开发与测试 需要编写在应用逻辑中的SQL语句建议在开发阶段先进行充分验证后再...
概述
本文为您介绍适用于连接和操作Hologres的常见开发工具及其使用场景，您可以选择熟悉的开发工具连接Hologres进行数据开发。工具介绍 说明 Hologres兼容PostgreSQL协议，提供JDBC/ODBC Drive：您可以从 JDBC官网 下载JDBC，使用JDBC连接时，...
导出开源引擎任务
DataWorks提供任务搬站功能，支持将Oozie、Azkaban、Airflow、DolphinScheduler等开源调度引擎的任务快速迁移至DataWorks。本文为您介绍导出任务的文件要求等相关信息。背景信息 您需要先导出开源调度引擎的任务至本地或OSS，再导入至...
2018年功能发布记录
什么是函数计算 2018年02月 功能名称 变更类型 功能描述 相关文档 多款OSS实用模板 新增 函数计算推出多款OSS实用模板，可以实现以下功能：计算OSS文件的MD 5值 备份OSS增量数据 针对文件打包并下载等功能模板 大大降低了开发者的使用难度...
2018年功能发布记录
什么是函数计算 2018年02月 功能名称 变更类型 功能描述 相关文档 多款OSS实用模板 新增 函数计算推出多款OSS实用模板，可以实现以下功能：计算OSS文件的MD 5值 备份OSS增量数据 针对文件打包并下载等功能模板 大大降低了开发者的使用难度...
通过控制台管理作业
本文介绍通过 云原生多模数据库 Lindorm 控制台管理计算引擎作业，包括创建、查看和终止Spark作业。前提条件 已开通计算引擎。如何开通，请参见 开通与变配。已完成作业开发。如何开发，请参见 JAR作业开发实践 或 Python作业开发实践。已...
场景：MaxCompute引擎在不同模式工作空间访问资源与...
MaxCompute引擎在不同模式下数据库表命名规范 不同模式工作空间的权限管理特征 不同工作空间模式下，引擎映射的DataWorks环境不同，不同工作空间类型的权限管理特征与优缺点也不一致，以下表格为您对比介绍两种空间类型的权限细分特点。...
（邀测）MaxCompute Notebook使用说明
MaxCompute Notebook是由MaxCompute提供的全托管、交互式数据分析挖掘模块，为数据工程师、数据分析师及数据科学家等人员提供Web交互式开发环境。支持用户通过SQL、PyODPS、Python等进行数据分析、探索，挖掘数据的价值，完成大数据与AI的...
通过函数计算节点实现GitHub实时数据分析与结果发送
开发人员在基于GitHub开源项目进行开发时会产生海量事件，GitHub会记录每次事件的类型、详情、开发者和代码仓库等信息，并开放其中的公开事件。DataWorks提供“Github十大热门编程语言”模板，通过对GitHub中公开数据集进行加工和分析，并...
配置Lindorm Spark节点
任务编排的Lindorm Spark节点可以通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求，同时可以方便地读取Lindorm宽表引擎数据，与OSS上的数据进行联合分析。前提条件 您...
设备接入概述
环境要求与配置 认证与连接 Python Link SDK 适用于Python语言开发的设备，不适用Python轻应用开发。环境要求与配置 认证与连接 Java Link SDK 适用于Java语言开发的设备。环境要求与配置 认证与连接 Node.js Link SDK 适用于Node.js语言...
代码模板
功能概述 本模块主要针对埋点开发者使用，在埋点开发时为开发者自动生成「与埋点方案关联的埋点代码」，开发者仅需复制粘贴至开发代码中，进行值赋予即可。埋点方案和埋点API在开发前已经为固定的内容，开发者做的是将埋点方案中的每一个...
文档修订记录
开发ODPS Spark任务 2023年5月更新记录 时间 特性 类别 描述 产品文档 2023.5.22 新增功能 管理控制 当在DataWorks控制台进行引擎相关操作时（如新增引擎实例、编辑已有引擎），界面会提示您需先完成授权相关操作，您根据界面提示完成授权...
开源自建对比
Serverless 应用引擎 SAE（Serverless App Engine）是面向应用的Serverless PaaS平台，提供成本更优、效率更高的一站式应用托管方案，容器新手也可以体验Serverless、K8s和微服务。您可以通过不同场景，对比 SAE 与开源自建产品在系统搭建...
通义灵码介绍
是阿里云出品的一款基于通义大模型的智能编码辅助工具，提供行级/函数级实时续写、自然语言生成代码、单元测试生成、代码优化、注释生成、代码解释、研发智能问答、异常报错排查等能力，并针对阿里云的云服务使用场景调优，助力开发者高效...
垃圾分类
Quick Start 本示例演示了基于 OSS 浏览器端文件直传的能力 本示例演示了基于 Python 语言开发调用阿里云视觉智能服务的能力 创建应用 登录 阿里云Serverless云开发平台，进入应用列表，点击「创建新应用」，选择「实验室」，勾选「AIoT」...
管理应用
Serverless 应用引擎 SAE（Serverless App Engine）是一款极简易用、自适应弹性的容器化应用平台，提供全托管的计算服务来运行您的程序，支持网站、小程序、APP以及微服务应用。本文介绍如何在 SAE 控制台创建、更新、删除以及启停应用。...
python轻应用示例合集
案例实现 4.1 硬件连接 该案例只需要连接电源线以及串口线，如下图所示：4.2 软件实现 AliOS Things开发环境搭建 开发环境的搭建请参考《AliOS Things集成开发环境使用说明之搭建开发环境》，其中详细的介绍了AliOS Things 3.3的IDE集成...
新手指引
短信服务的基础知识 短信服务的产品介绍 短信服务的产品优势 短信服务的应用场景 短信服务的基本概念 短信发送规则 短信服务的计费方式 短信服务的计费方式分为按量计费和短信套餐包，请根据需要选择最优的计费方案。详情请参见 计费概述。...
新建离线计算模板
SPARK_JAR_ON_HIVE HADOOP_MR TDH Inceptor计算引擎 INCEPTOR_SQL SPARK_JAR_ON_HIVE HADOOP_MR ADB for PostgreSQL计算引擎 ADB_PG_SQL StarRocks计算引擎 STARROCKS_SQL ArgoDB计算引擎 ARGODB_SQL 选择目录 默认选择为离线计算模板。...
新建离线计算模板
Dataphin支持创建离线计算模板。后续在开发任务时，可以引用创建的离线计算模板以提高任务的研发效率。本文为您介绍如何创建、配置并提交离线计算模板。背景信息 当多个任务的代码逻辑相似，只有部分配置项或输入参数不同时，您可以将代码...
配置作业部署信息
Python作业 包括 引擎版本、Python Uri、Entry Module、Entry Point Main Arguments、Python Libraries、Python Archives、附加依赖文件、备注、Kerberos集群 和 作业标签。参数含义详情请参见 部署作业。运行参数配置 参数 说明 系统检查...
- 产品推荐
- 这些文档可能帮助您