全增量同步任务运维
完成任务配置后，您可以对已创建的任务进行管理，同时，您还可以查看任务运行的指标详情。本文为您介绍全增量同步任务的常见运维操作。背景信息 本文仅说明全增量同步任务常见的运维操作，全增量同步任务产生的实时同步子任务运维操作请...
使用Python读文件
Dataphin仅支持开发基于Python的脚本，不支持开发依赖第三方组件的脚本。开发基于第三方组件的脚本，需要通过pip install下载第三方组件。本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址...
Java UDF最佳实践
步骤三：新建SQL任务 在 数据处理 页签，单击左侧导航栏 计算任务 图标。在 计算任务 页面，单击 计算任务 后的 图标，选择 MAXC任务 MAX_COMPUTE_SQL。在 新建文件 对话框，配置参数。参数 描述 名称 填写计算任务的名称，例如 javaudf。...
使用Python读文件
Dataphin仅支持开发基于Python的脚本，不支持开发依赖第三方组件的脚本。开发基于第三方组件的脚本，需要通过pip install下载第三方组件。本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址...
Java UDF最佳实践
步骤三：新建SQL任务 在 数据处理 页签，单击左侧导航栏 计算任务 图标。在 计算任务 页面，单击 计算任务 后的 图标，选择 MAXC任务>MAX_COMPUTE_SQL。在 新建文件 对话框，配置参数。参数 描述 名称 填写计算任务的名称，例如 javaudf。...
创建EMR Impala节点
单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布。请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布...
MySQL节点
网络联通说明 网络连通说明 MySQL节点需要访问MySQL服务，您需要确保独享调度资源组和MySQL数据库的网络已连通，关于独享调度资源组网络连通方案，详情请参见：绑定专有网络。配置白名单 若MySQL数据库存在白名单访问控制，您需要在MySQL...
创建EMR Hive节点
单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布。请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布...
搭建场景
在工作台顶部操作栏显示操作图标：（移动）、（旋转）、（缩放）。工作台功能说明，请参见 场景搭建。参考以下步骤，完成场景中模型设置。单击操作图标。图标会变蓝色，例如移动：。单击待操作模型的模块，选中模块。工作台左侧会显示模型...
创建EMR Spark SQL节点
单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布。请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布...
配置同步任务
代码编写页面仅限解锁及被您自己锁定的状态方可编辑，如果他人锁定显示 图标，单击 图标，进行偷锁，偷锁成功后显示 图标，您可以开始编辑同步任务。说明 保存完成修改的 已提交 状态的同步任务后，系统自动将同步任务的状态调整为 开发中...
Data Lake Analytics节点
如果您需要修改在 数据开发 页面测试时使用的任务执行资源，请单击工具栏中的 图标，选择相应的独享调度资源组。说明 因为访问专有网络环境的数据源需要使用独享调度资源组执行任务，所以此处必须选择测试连通性成功的独享调度资源组。单击...
Android SDK 接入
前期准备 2.1 准备工作 如果应用开启了手机号认证服务，请确保终端设备已经开启4G网络（联通、移动支持3G网络，但接口耗时会增加），手机号认证授权之后，联通电信可立即使用，移动需等待10分钟后使用。2.2 接入流程 2.3 运行demo工程 解压...
创建CDH Impala节点
使用限制 不支持 公共调度资源组 运行该类型任务。步骤一：创建CDH Impala节点 进入数据开发页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。...
创建和管理基于便捷账号的办公网络
开启 办公网络 内云电脑网络互通 同一个 办公网络 内的云电脑之间默认无法互相访问，如需实现网络互通，可以在 办公网络 详情页开启 办公网络内云电脑互通 功能。在左侧导航栏，选择 网络与存储>办公网络（原工作区）。在顶部菜单栏左上角...
数据解析工作台说明
本文介绍数据解析工作台的导航栏、画布、操作栏功能。背景信息 您可以使用数据解析工作台，配置数据解析任务分析处理接入数据服务的数据源。更多信息，请参见 使用说明。进入数据解析工作台 在 物联网平台控制台 的 实例概览 页面，单击...
创建CDH Hive节点
如果您已部署CDH集群并希望借助DataWorks执行Hive任务（例如，数据查询作业或处理批量数据），可以使用CDH Hive节点。本文为您介绍如何创建CDH Hive节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于...
创建CDH Presto节点
单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布。请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
标记离线计算实例
对执行失败或异常的离线计算实例标记后，实例的状态会标记为成功，方便对实例进行筛选。本文主要介绍如何标记离线计算实例。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标...
标记离线计算实例
对执行失败或异常的离线计算实例标记后，实例的状态会标记为成功，方便对实例进行筛选。本文主要介绍如何标记离线计算实例。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组...
创建CDH Spark节点
准备工作：开发Spark任务并获取JAR包 在使用DataWorks调度CDH Spark任务前，您需要先在CDH中开发Spark任务代码并完成任务代码的编译，生成编译后的任务JAR包，CDH Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...
管理共享存储NAS
删除后，同一个办公网络内不同云电脑之间无法共享文件，可能会影响业务正常进行，同时NAS文件系统中的文件和数据无法恢复，请谨慎操作。登录 无影云电脑 控制台。在左侧导航栏，选择 网络与存储>文件存储NAS。在顶部菜单栏左上角，选择地域...
如何修复异常DBS备份计划
问题原因 DBS备份计划状态显示异常，表示该DBS备份计划下至少存在一个异常任务，通常可能是全量备份任务异常或增量备份任务异常，也可能是其他类型任务出现异常。说明 任务出现异常时，DBS不会直接启动异常任务，以免影响客户业务。为了...
使用DataWorks
在顶部菜单栏，单击 图标后，单击 图标，运行离线同步任务。通过脚本模式配置并运行数据同步任务 配置网络与资源。选择离线同步任务的数据来源和数据去向，以及用于执行同步任务的资源组，并测试连通性。具体操作请参见 通过向导模式配置并...
查看开发环境场景运维信息
任务流列表会显示整个场景的节点流程图和节点列表，本文介绍如何查看开发环境场景运维信息。前提条件 已部署运行开发环境场景，具体操作，请参见 新建开发环境场景并运行。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 ...
查看开发环境场景运维信息
任务流列表会显示整个场景的节点流程图和节点列表，本文介绍如何查看开发环境场景运维信息。前提条件 已部署运行开发环境场景，具体操作，请参见 新建开发环境场景并运行。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，...
查看监控概览
核心指标看板 可查看当前工作组核心指标的监控黑榜，包括告警分组所含异常任务数、任务来源所含异常任务数、负责结构所负责异常任务数、负责人所负责异常任务、业务监控链路所含异常任务数、高频异常任务。说明 如果没有异常任务排行，单击...
查看监控概览
核心指标看板 可查看当前工作组核心指标的监控黑榜，包括告警分组所含异常任务数、任务来源所含异常任务数、负责结构所负责异常任务数、负责人所负责异常任务、业务监控链路所含异常任务数、高频异常任务。说明 如果没有异常任务排行，单击...
加入与解绑云企业网
创建 云企业网 实例后，如果 办公网络 与其他网络实例（例如其他VPC、边界路由器VBR、云连接网CCN等）之间需要网络互通，或者不同 办公网络 之间的云电脑有网络互通的需求，您可以将 办公网络 加入 云企业网 实例中，以实现网络互通。...
07物理表质量预警订阅
本文介绍如何设置物理表质量预警订阅信息。前提条件 已新建并运行“ods_qcheck”质量评估任务，具体详情，请参见 新建质量评估计划。已在监控设置中配置...预期结果 物理表质量预警订阅成功，并在 监控任务管理 页面中显示任务的运维信息。
管理浏览器探测任务
创建浏览器探测任务后，您可以编辑脚本录制，并对其执行修改、删除、停用和启用操作。编辑脚本录制 仅PC端的浏览器探测任务，可以编辑脚本录制。登录 云监控控制台。在左侧导航栏，选择 网络分析与监控>站点监控。在 监控任务 页签，单击...
创建EMR Spark节点
准备工作：开发Spark任务并获取JAR包 在使用DataWorks调度EMR Spark任务前，您需要先在EMR中开发Spark任务代码并完成任务代码的编译，生成编译后的任务JAR包，EMR Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...
定时任务
定时任务可以在固定的间隔时间执行指定的程序或者指令，应用监控的定时任务功能可以帮助您了解定时任务的详细情况，包括概览、SQL调用分析、NoSQL调用分析、异常分析、错误分析、链路下游和调用链查询。说明 ARMS应用监控目前仅支持展示XXL...
日历的使用
在日历页面，左侧栏显示的是可供选择的关注对象，这里的关注对象可以是成员、部门群组和项目，右侧日历中则会按时间展示与关注对象有关的任务和日程。如图：① 左侧栏勾选了测试，则关注对象为测试这个成员；② 当前展示时间范围是 2019 年...
基础监控
任务托管到 Serverless 应用引擎 SAE（Serverless App Engine）后，SAE 对任务所运行的设备从CPU、负载、内存、网络和磁盘等维度进行数据采集与分析，并以动态图的方式展示，方便您实时、直观地了解任务所运行设备的状态。所有监控均以任务...
查看测试任务报告
API测试任务运行成功后，可通过查看测试报告，了解调试状态、调用明细等。本文介绍如何查看API测试任务报告。前提条件 已运行API测试任务，具体操作，请参见 运行API测试任务。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标...
快速入门
本文为您介绍如何快速发布自学习AI训练任务。前提条件 已开通视觉智能开放平台 自学习服务。操作流程 初次使用阿里云视觉智能开放平台时，您可以根据以下流程快速上手视觉智能开放平台：步骤一：创建生产空间 步骤二：上传数据 步骤三：...
查看测试任务报告
API测试任务运行成功后，可通过查看测试报告，了解调试状态、调用明细等。本文介绍如何查看API测试任务报告。前提条件 已运行API测试任务，具体操作，请参见 运行API测试任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，...
- 产品推荐
- 这些文档可能帮助您