六、DataWorks 数据开发6.1 数据开发总览四种运行方式：数据开发模块中除了组织管理员权限外，其余角色包括：项目管理员、开发、运维、部署和访客。6.2 任务开发6.3 任务类型6.4 脚本开发6.5 函数管理6.6 发布管理6.7 导入本地文件七、DataWorks 调度配置7.1 调度周期配置7.2 调度参数配置7.3 DataWorks 中的参数功能调度参数获取7.4 调度依赖关系7....

文章 2022-06-13 来自：开发者社区

阿里云大数据ACP（一）大数据开发平台 DataWorks 1

文章目录一、DataWorks 简介1.1 DataWorks 的功能概述1.2 DataWorks 产品特点1.3 DataWorks 产品优势1.4 应用场景（助力企业搭建大数据信息平台）二、DataWorks 基本概念2.1 组织与项目空间2.2 任务（Task）2.3 工作流、节点、依赖关系2.4 任务（Task）类别2.5 实例（Instance）2.6 资源与函数三、DataWor....

文章 2022-02-17 来自：开发者社区

阿里云大数据产品Dataworks2.0问题排查思路

1.数据同步不支持数据包含换行符n2.PAI节点可以支持TenSorFlow。3.遇到连通性通过，但是配置同步作业或运行时会有超时情况。这种情况通常自定义资源组来做同步。4.正常调用正常但重跑报错报错ODPS-0130071，重新打开窗口重跑流程。5.与其他关联产品比如ODPS、PAI是和项目空间确认绑定关系的。必须创建dataworks时来配置。6.赋值节点中是不支持使用python代码执行S....

文章 2022-02-17 来自：开发者社区

阿里云大数据ACP认证知识点梳理9——产品特点（DATA WORKS）

DataWorks（数据工场，原大数据开发套件）是阿里云数加重要的PaaS平台产品，它提供全面托管的工作流服务，一站式开发管理的界面，帮助企业专注于数据价值的挖掘和探索。 DataWorks（数据工场）基于MaxCompute作为核心的计算、存储引擎，提供了海量数据的离线加工分析、数据挖掘的能力. 使用DataWorks（数据工场），可对数据进行数据传输、数据转换等相关操作，从不同的数据存储引入....

文章 2022-02-15 来自：开发者社区

阿里云大数据工厂DataWorks学习之--数据同步任务常见日志报错总结

在使用大数据开发套件时最常用的就是数据同步模块，工单里最常见的问题就是其中数据同步的问题，这里总结一些常见一些从Maxcompute到其他数据源的同步任务报错案例，主要是日志中出现数据回滚写入的问题。那首先看下日志中数据回滚的原因，当数据写入rds或者hybridDB等一些支持事务的数据库中，数据批量写入，一旦由于各种原因没有写入成功，这个批次的数据会回滚重新写入，如果再...