DeleteFunction-删除数据开发函数

调用该接口,在数据开发中删除指定的udf函数。接口说明 注意 当这个 udf 函数被发布后,无法删除,必须先下线再进行删除。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动...

入门概述

本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks,请确认已经根据 准备工作 模块的操作,准备好账号和工作空间角色等内容后,登录DataWorks控制台,单击相应工作空间后的 进入数据开发,即可进行...

RenameWorkflowDefinition-重命名数据开发工作流

调用此接口,可以重命名数据开发工作流。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填...

MoveWorkflowDefinition-移动数据开发工作流路径

调用此接口,可以将指定的数据开发工作流移动到数据开发目录的目标路径。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...

CreateNode-创建数据开发节点

调用该接口,会在新版数据开发中创建一个数据开发节点。接口说明 注意 该接口不支持批量操作,若 FlowSpec 中定义了不止一个节点,则除第一个以外的后续节点均会被忽略。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的...

MoveResource-移动数据开发文件资源路径

调用此接口,可以将指定数据开发文件资源移动到指定的数据开发目录中。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息...

编辑器代码提效

进入编辑器界面 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入节点的代码编辑器。在数据开发页面的左侧目录树查找目标节点,双击节点名称即可...

基于模型生成ETL代码

维度表、明细表、汇总表等模型表发布后,DataWorks智能数据建模的模型开发功能支持快速生成代码框架,帮助您提高后续数据开发效率。本文为您介绍如何通过模型开发功能生成代码框架。前提条件 模型表已发布,操作详情请参见 发布模型至引擎...

UpdateResource-更新数据开发文件资源信息

调用此接口,可以更新数据开发文件资源的基本信息。更新以增量更新的方式进行,更新信息以FlowSpec格式描述。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例...

创建EMR Presto节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Presto节点。右键单击目标业务流程,选择 新建节点 EMR EMR Presto。说明 您也可以鼠标悬停...

场景教程

数据集成 数据开发 简单开发应用教程 本教程将指引您完成一个完整的数据开发和周期调度运维操作,适用于各种数据开发场景。MaxCompute 数据集成 数据开发 运维中心 数据分析与可视化 相关教程 说明 教程使用的计算引擎 涉及模块 使用公开...

开放平台:能力全面开放

DataWorks开放平台是DataWorks对外提供数据和能力的开放通道。DataWorks开放平台提供开放API(OpenAPI)、开放事件(OpenEvent)、扩展程序(Extensions)的能力,可以帮助您快速实现各类应用系统对接DataWorks、方便快捷的进行数据流程...

HoloStudio(即将下线)

为给您提供一致的开发体验,DataWorks HoloStudio 产品能力将整合至 DataWorks 数据开发(DataStudio)中,从 2024年2月29日 开始,HoloStudio将不再提供服务,届时您可使用DataStudio相关功能继续进行Hologres的数据开发。针对已存在于...

Shell类型节点运行Python脚本

数据开发页面右键单击目标业务流程,选择 新建资源,在 MaxCompute 目录下选择 Python 资源,输入资源名称 mc.py 进行创建。说明 mc.py 为示例资源名称,您可根据实际业务情况进行调整。编辑MaxCompute Python资源。进入MaxCompute ...

创建EMR Impala节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Impala节点。右键单击目标业务流程,选择 新建节点 EMR EMR Impala。说明 您也可以鼠标悬停...

调用API

查看API调用的认证信息 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据服务,在下拉框中选择对应工作空间后单击 进入数据服务。在数据服务页面,单击上方的 服务管理。在左侧导航栏,单击 API调用。在 API...

工作空间概述

后续:开始数据开发 创建工作空间并分配空间成员角色权限后,您可根据各角色定义的权限前往数据开发DataStudio模块开始数据开发工作,数据开发模块的入门教程详情请参见:数据开发:开发者。相关文档 在阅读工作空间的概述后,若您想创建...

RenameFunction-重命名数据开发函数

10002 Id string 是 数据开发 udf 函数的唯一标识。543217824470354XXXX Name string 是 希望重命名的名称 重命名 返回参数 名称 类型 描述 示例值 object Schema of Response RequestId string 请求的唯一标识,用于后续错误排查使用。1ED...

创建AnalyticDB for PostgreSQL表

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面,鼠标悬停至 图标,单击 新建表 AnalyticDB for PostgreSQL 表。您也可以打开相应...

HoloStudio一键迁移至DataStudio

为给您提供一致的开发体验,HoloStudio产品能力将整合至DataStudio中,届时您可使用DataStudio相关功能继续进行Hologres的数据开发。在指定时间内,您可参考本文手动迁移HoloStudio的已有文件至DataStudio;超过该时间,系统将自动为您完成...

DeleteResource-删除数据开发文件资源

调用此接口,可以删除指定的数据开发文件资源。接口说明 注意 当这个文件资源被发布后,无法删除,必须先下线再进行删除。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动...

创建解决方案

数据开发模式全面升级,包括工作空间 解决方案 业务流程三级结构,抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级,按照业务种类组织相关的不同类型的节点,让您能够更好地以业务为单元、连接多个业务流程进行开发...

绑定Hologres实例

在DataWorks中创建对应的Hologres数据源,再将其绑定至数据开发(DataStudio)模块后,您即可在DataWorks中读取Hologres数据源数据,并进行相应的数据同步、开发和分析等操作。前提条件 已购买Hologres实例并创建数据库。具体操作,请参见...

DataWorks节点合集

DataWorks的数据开发(DataStudio)模块为您提供多种类型的节点,包括用于数据同步的数据集成节点,用于数据清洗的引擎计算节点(例如,ODPS SQL、Hologres SQL、EMR Hive),以及可对引擎计算节点进行复杂逻辑处理的通用节点(例如,可...

CreateResource-创建数据开发文件资源

调用此接口,可以在数据开发中创建一个数据开发文件资源,文件资源的信息定义以FlowSpec格式描述。接口说明 注意 该接口不支持批量操作,若 FlowSpec 中定义了不止一个资源文件,则除第一个以外的后续资源文件均会被忽略。调试 您可以在...

配置基础属性

进入数据开发节点的编辑页面,单击右侧导航栏的 调度配置,在 基础属性 区域配置调度节点的基本信息。参数 描述 名称 新建数据开发节点时输入的节点名称,不可以修改。节点ID 数据开发节点提交后会生成唯一的节点ID,不可以修改。节点类型 ...

调试代码片段:快捷运行

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。查找目标节点并进入节点编辑页面。在 数据开发 或 手动业务流程 功能模块的目录树,或通过 临时查询...

API数据服务

前提条件 在开始示例前,请确认您已经通过数据开发DataStudio将数据加工为用户画像基本数据。如果使用的是MaxCompute数据源,请参见 简单用户画像分析(MaxCompute版)进行数据加工。如果使用的是StarRocks数据源,请参见 用户画像分析...

配置Hologres输出

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

DataWorks新版数据源公告

若想使用创建的数据源进行数据开发,则数据源创建完成后还需进入数据开发(DataStudio)进行模块绑定。已绑定的计算引擎:已绑定的计算引擎迁移至 数据开发 数据源 管理。编辑计算引擎:不再支持直接编辑计算引擎,如需编辑可直接通过编辑...

数据分析概述

DataWorks提供的数据分析平台,可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中,您不仅可以在线洞察数据,还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...

扩展程序审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上角的 图标,选择 全部产品 更多 审批中心。在左侧导航栏选择 审批策略管理 扩展程序。创建...

使用公开数据集进行数据查询、分析和可视化

静态数据 生活服务 杭州市各区县旅游数据 本数据集来源于杭州文化和旅游数据在线开放平台数据日期更新至2023.07.18),包含每日杭州市各区县的消费人数、消费金额和酒店入住率等旅游相关指标,可以在出游场景中快速分析各区县的出行情况...

开发阶段

您在完成需求评审、模型与调度设计后,即可进入数据开发阶段。开发阶段的主要任务是将设计阶段的产出转化为具体代码。开发过程中,开发人员必须保证代码的规范性、准确性。同时进行适当的单元测试,以便后续测试工作可以顺利开展。开发阶段...

配置示例:MaxCompute

单击当前页面左上方的 图标,选择 全部产品 数据开发与运维 DataStudio(数据开发)。在数据开发页面左侧导航栏,单击数据源,绑定已添加的MaxCompute数据源。说明 本示例使用的测试表中添加的测试数据来自MaxCompute 公开数据集,实际配置...

测试函数

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据服务,在下拉框中选择对应工作空间后单击 进入数据服务。在 服务开发 页面的函数列表中,双击开发中的函数名称。在函数的编辑页面,单击右上方的 测试。在 ...

创建并管理业务流程

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据服务,在下拉框中选择对应工作空间后单击 进入数据服务。在 服务开发 页面,鼠标悬停至 图标,单击 新建业务流程。在 新建业务流程 对话框中,配置各项参数...

扩展程序概述

注意事项 权限控制:仅 开放平台管理员 和 租户管理员、阿里云主账号或者拥有 AliyunDataWorksFullAccess 权限的RAM用户拥有开发者后台的读写权限,权限控制详情请参见 全局级模块权限控制、产品及控制台权限控制详情:RAM Policy。...

查看代码结构

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与治理 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入目标节点的编辑页面。您可以在 数据开发 或 手动业务流程 的目录树下,找到目标节点,双击该...

数据地图概述

说明 如果需要在 数据开发 中 表管理 进行可视化建表操作,请先在数据地图进行元数据采集,可视化建表操作请参见 表管理。网络连通 如果您需要将数据源中的元数据导入数据地图进行统一的元数据管理,需要先确保数据地图元数据采集器能正常...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 ClickHouse 智能开放搜索 OpenSearch 数据传输服务 数据管理(兼容数据库备份) 人工智能平台 PAI 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用