大数据开发治理平台 DataWorks
大数据开发治理平台 DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台，...每天阿里巴巴集团内部有数万名数据/算法工程师正在使用DataWorks，承担集团99%数据业务构建。
DataWorks on EMR权限管控说明
在DataWorks运行EMR任务时，您需要在EMR侧及DataWorks侧进行相关的权限认证，以保证任务可以顺利执行。本文为您介绍DataWorks on EMR权限管控说明。背景信息 在DataWorks中，可通过DataWorks工作空间成员与EMR集群账号映射的方式获取EMR...
开通DataWorks服务
DataWorks提供了DataWorks+计算引擎的组合购买、DataWorks单独购买两种方式，您可根据需要选择任意方式开通DataWorks相关服务。本文为您介绍如何开通DataWorks。前提条件开通DataWorks服务前，您需准备所需账号：如需使用阿里云账号（主...
DataWorks On Hologres使用说明
DataWorks基于实时数仓Hologres轻松构建实时数仓与即席分析系统；Hologres通过DataWorks采用可视化方式，进行任务工作流的配置、周期性调度执行及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上使用Hologres的基本...
DataWorks准备工作流程
DataWorks是为您提供专业高效、安全可靠的一站式大数据开发与治理平台，使用其进行数据开发前，您需做好相关准备工作，保障后续开发任务可顺利执行。本文为您介绍DataWorks的购买及环境准备流程，帮助您快速开通DataWorks并准备所需开发...
最佳实践：为RAM用户授权指引
产品级：DataWorks管理与操作权限管控 模块级：DataWorks管理控制台权限管控 模块级：DataWorks不同模块权限管控 产品级：DataWorks管理与操作权限管控产品级的DataWorks管理与操作权限管控，需通过访问控制的RAM权限策略实现，具体如下。...
自定义RAM Policy策略
DataWorks支持您通过自定义RAM Policy策略并授权给指定RAM用户的方式，实现精细化权限管理。使得RAM用户仅拥有该权限策略所定义的权限。本文为您介绍产品及控制台权限控制能力与自定义权限策略的常见应用示例。前提条件 已了解RAM Policy的...
入门概述
如果您是第一次使用DataWorks，请确认已经根据准备工作模块的操作，准备好账号和工作空间角色等内容后，登录DataWorks控制台，单击相应工作空间后的进入数据开发，即可进行数据开发操作。本模块的操作在标准模式的工作空间下进行。如果您...
迁移助手与迁云服务
DataWorks迁移助手支持将开源调度引擎的作业迁移至DataWorks，支持作业跨云、跨Region、跨账号迁移，实现DataWorks作业快速克隆部署，同时DataWorks团队联合大数据专家服务团队，上线迁云服务，帮助您快速实现数据与任务的上云。...
DataWorks模块使用说明
本文将为您介绍DataWorks主要模块的基本使用场景。使用流程主流程说明相关文档数仓设计与建模DataWorks智能建模支持数仓规划设计、制定并沉淀企业数据标准、维度建模、数据指标定义。通过使用DataWorks数据建模，您可以将无序、杂乱、繁琐...
DataWorks On MaxCompute使用说明
DataWorks基于云原生大数据计算服务MaxCompute轻松构建离线数仓分析系统；MaxCompute通过DataWorks采用可视化方式，进行任务工作流的配置、周期性调度执行及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上使用...
迁移EMR项目至DataWorks
本文将为您介绍，如何通过一键迁移方式以及文件导入导出方式将阿里云E-MapReduce（以下简称EMR）项目迁移至DataWorks工作空间的操作方法。前提条件 已开通DataWorks服务并创建DataWorks工作空间。如您是RAM用户，需要拥有管理员权限或RAM...
概述
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
DataWorks权限体系功能概述
DataWorks提供了完善的权限管控机制，支持在产品级与模块级对权限进行管控，其中，模块级权限按照管控对象又分为DataWorks控制台和DataWorks功能模块权限管控，您可以通过RAM Policy权限体系管理产品级及DataWorks控制台的权限；通过RBAC...
DataWorks On EMR开发流程（必读）
DataWorks支持基于EMR（E-MapReduce）计算引擎创建Hive、MR、Presto和Spark SQL等节点，实现EMR任务工作流的配置、定时调度和元数据管理等功能，帮助EMR用户更好地产出数据。本文为您介绍使用DataLake（新版数据湖）集群在DataWorks上进行...
开放平台概览
DataWorks开放平台是DataWorks对外提供数据和能力的开放通道。DataWorks开放平台提供开放API（OpenAPI）、开放事件（OpenEvent）、扩展程序（Extensions）的能力，可以帮助您快速实现各类应用系统对接DataWorks、方便快捷的进行数据流程...
功能发布记录 2022年之前
本文为您介绍2022年之前DataWorks产品功能和对应的文档动态。MaxCompute的重要功能发布详情请参见产品重大更新。2021-12功能名称功能描述发布时间发布地域相关文档数据质量支持选择规则模板来批量配置数据质量规则。DataWorks数据质量支持...
计费方式
本文为您介绍DataWorks数据集成的计费要点和各功能模块的软件费用详情。运行数据集成任务会产生DataWorks相关费用，此外还可能其他产品费用，具体如下：DataWorks相关收费数据集成资源组（独享数据集成资源组计费说明：包年包月，如果使用...
DataWorks V3.0
本文将为您介绍DataWorks V3.0版本的发布历史及新增特性。DataWorks V3.0发布发布版本：DataWorks V3.0 发布时间：2019年12月18日发布范围：全球所有已开通DataWorks的地域发布内容：DataWorks V2.0仅支持MaxCompute计算引擎，DataWorks V3...
引擎运维
在DataWorks实例任务中，E-MapReduce计算引擎任务会被分为若干作业有序执行。您可以使用DataWorks的引擎运维功能，查看各个E-MapReduce作业的详细信息，及时查找并清理运行有误的作业，避免该类作业阻塞下游任务，影响实例任务的正常运行。...
DataWorks各版本详解
DataWorks版本包括基础版和增值版本两大类，其中增值版本包括标准版、专业版、企业版，您可以根据自身的业务场景，选择合适的版本进行购买。本文为您介绍DataWorks各版本的推荐应用场景和功能差异。DataWorks各版本购买注意事项DataWorks的...
RAM用户登录并使用DataWorks
本文为您介绍RAM用户如何登录DataWorks更新个人信息，并创建工作空间。前提条件如果您是第一次使用RAM用户登录并使用DataWorks，请确认以下信息： 该RAM用户所属主账号的企业别名。该RAM用户的用户名和密码。DataWorks已不需要强制使用...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
DataWorks交流钉钉群
DataWorks作为阿里云大数据平台操作系统，对接各种大数据计算引擎，以all in one box的方式提供专业高效、安全可靠的全域智能大数据平台，高效率完成数据全链路研发流程，建设企业数据治理体系，同时提供优质高效的交流服务，本文为您介绍...
OpenAPI计费说明
购买DataWorks后，您可调用DataWorks的OpenAPI使用DataWorks的各项功能，DataWorks根据您调用API的次数进行计费收费，本文为您介绍OpenAPI的计费详情。背景信息 DataWorks不同版本提供的OpenAPI能力不同，且支持调用的次数等限制也不同，各...
功能发布记录（2022年）
本文为您介绍2022年DataWorks产品功能和对应的文档动态。2023-1功能名称功能描述发布时间发布地域使用客户相关文档DataWorks新增已购资源进行商品管理新增功能如下：DataWorks支持展示您当前所有已购买且未释放的下属商品，方便您快速进行...
全局级模块权限控制
DataWorks支持以租户全局为管控粒度，通过对用户授予不同角色实现全局模块的精细化权限控制。DataWorks为您预设部分全局角色，同时支持您自定义全局角色。本文为您介绍全局模块成员权限管理的基本操作。背景信息 进入DataWorks功能模块界面...
开放平台：能力全面开放
DataWorks开放平台是DataWorks对外提供数据和能力的开放通道。DataWorks开放平台提供开放API（OpenAPI）、开放事件（OpenEvent）、扩展程序（Extensions）的能力，可以帮助您快速实现各类应用系统对接DataWorks、方便快捷的进行数据流程...
计费逻辑说明
DataWorks计费体系由软件费用与资源费用两部分组成，计费体系中各计费项的计费模式分为包年包月与按量付费两种计费形式。本文为您介绍DataWorks的计费要点和各功能模块的软件费用详情。注意事项不同规格、不同云环境（例如，公共云、金融云...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
开放API（OpenAPI）
DataWorks开放平台提供OpenAPI能力，通过调用DataWorks的OpenAPI使用DataWorks的各项功能，实现应用和DataWorks的集成和交互。背景信息 DataWorks的OpenAPI提供100多个API功能，通过调用API，可以快速进行批量操作和系统集成对接等工作，...
准备环境
为保证您可以顺利完成本次教程，您需要准备教程所需的EMR集群、DataWorks工作空间，并做好相关的环境配置。前提条件 注册阿里云账号，详情请参见阿里云账号注册流程。实名认证，详情请参见个人实名认证或企业实名认证和个体工商户认证。...
流程管控
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
DataWorks版本服务计费说明
DataWorks增值版本包括标准版、专业版、企业版，您可以根据自身的业务场景，选择合适的版本进行购买，增值版的计费方式为包年包月。本文为您介绍DataWorks增值版本的计费详情。如您需要专业的售前购买指导，请前往查看：DataWorks购买指引...
空间级模块权限管控
DataWorks支持以工作空间为管控粒度，通过对用户授予不同角色实现空间内各功能点的权限控制。包括平台预设角色及自定义空间级角色，其中预设角色拥有固定的功能点权限，自定义空间级角色可控制空间级模块的读写权限。本文为您介绍空间成员...
开启消息订阅
DataWorks的OpenEvent通过EventBridge为您提供事件消息订阅与发送服务。在EventBridge中创建自定义总线后，您需要在DataWorks中开启消息订阅并配置消息事件分发通道，以便在EventBridge中创建规则并完成事件的发布。本文为您介绍如何开启...
搭建运维监控大屏
本文将会为您介绍如何使用DataWorks OpenAPI、DataWorks开放元数据、DataWorks开放事件消息搭建DataWorks运维大屏。项目级别运维监控 周期实例数量趋势图 说明 通过调用DataWorks OpenAPI的接口ListInstanceAmount即可放入某项目下的周期...
DataWorks增值版本到期降级功能变化清单
您购买使用DataWorks增值版本后，如果因为没有及时续费等一些原因导致增值版本DataWorks到期，则到期后增值版DataWorks会降级为基础版DataWorks，对您使用的DataWorks功能可能会有影响。本文为您介绍DataWorks增值版本到期降级后功能变化...
DataWorks on EMR数据安全方案
本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息DataWorks on EMR目前支持LDAP认证方式，Open LDAP组件目前已经集成 Hive,spark thrift-server,kyuubi,presto, impala，保障认证通过的用户才...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
- 产品推荐
- 这些文档可能帮助您
