离线同步常见问题
您可以控制是否允许脏数据产生，并且支持控制脏数据条数，数据集成默认允许脏数据产生，您可以在同步任务配置时指定脏数据产生条数。详情可参考：通过向导模式配置离线同步任务。任务设置允许脏数据：当脏数据产生时，任务继续执行，但脏...
使用热修复
热修复管理是客户端修复紧急问题的配置后台，您可以在该配置后台创建发布任务以及进行多维度的热修复配置。关于此任务 在 热修复管理 页面，通常您需要完成以下操作：添加热修复：将热修复包添加至 mPaaS 控制台。发布热修复包：根据最佳...
任务组批量升级
配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组，在创建新建任务组时，选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中，选择已经创建的任务组。支持批量升级，流水线在使用任务组时无法任意更改任务组配置。...
EDAS应用接入SchedulerX
结果验证 单击 任务调度配置 区域的 任务管理、应用分组 名称，可跳转至 任务调度>任务管理 进行任务配置。单击 任务调度配置 区域 通知配置 右侧的 图标，可跳转至 任务调度>应用管理 页面中对应的应用分组的 通知配置 编辑页面进行通知...
UpdateJob-更新任务配置信息
更新任务配置信息。默认先调用获取任务找到对应字段进行修改。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出...
数据同步概述
配置同步任务，详情请参见 配置同步任务。说明 系统默认为同步任务分配0.5核CPU、1GB内存，暂不支持扩大资源量。配置同步任务的调度参数，详情请参见 调度配置。说明 系统仅支持周期性节点的同步任务进行调度配置。编写代码的方式构建代码...
数据同步概述
配置同步任务，详情请参见 配置同步任务。说明 系统默认为同步任务分配0.5核CPU、1GB内存，暂不支持扩大资源量。配置同步任务的调度参数，详情请参见 调度配置。说明 系统仅支持周期性节点的同步任务进行调度配置。编写代码的方式构建代码...
TaskDetail
true RelateTaskConfig object 关系任务配置 null PeriodConfig object 时间配置 {"periodConfigId":"","status":""} MineConfigs object 我的配置 null VoteConfigs object 投票配置 {"1":{"VoteNum":1,"MinVote":1}} NoticeConfig object...
管理训练任务
停止训练任务 当任务配置错误、耗时过长或与其他任务产生资源冲突时，您可以在 分布式训练任务 列表中，单击目标任务 操作 列下的 停止，停止正在运行的任务。克隆训练任务 如果您已经创建了一个训练任务并对其进行了详细的配置，您可以在...
UpdateJob
调用UpdateJob接口更新任务配置信息。默认先调用获取任务找到对应字段进行修改。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必...
创建发布任务
立即启动 确认任务配置无误后，您可以单击 立即启动 保存本次发布任务并启动该任务。说明 单击 立即启动 后即使还未到达该任务的发布时间，任务也会立即启动。保存 确认任务配置无误后，您可以单击 保存 来保存本次发布任务。说明 单击 ...
新建MAX_COMPUTE_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建MAX_COMPUTE_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建VIRTUAL任务
背景信息 在开始构建数据模型前，您可以创建基于该数据模型的虚拟节点，以便于该数据模型中其他任务配置调度参数时依赖该节点。操作步骤 请参见 数据开发入口，进入数据 开发 页面。在数据 开发 页面，按照下图操作指引进入新建VIRTUAL任务...
新建VIRTUAL任务
背景信息 在开始构建数据模型前，您可以创建基于该数据模型的虚拟节点，以便于该数据模型中其他任务配置调度参数时依赖该节点。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。在数据 开发 页面，按照下图操作...
新建HOLOGRES_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。详细说明请参见：计算任务运行配置。说明 如果离线计算任务的调度类型为 手动任务，需要手动触发任务...
配置离线集成管道基本信息
您可以在离线集成管道编辑器属性对话框中查看离线集成任务的基本详细和进行调度配置，包括集成任务的名称、节点ID、节点类型，并配置对应责任人、描述等基本信息。本文将为您介绍离线集成任务属性的基本信息参数配置。操作步骤 请参见 离线...
配置离线集成管道基本信息
您可以在离线集成管道编辑器属性对话框中查看离线集成任务的基本详细和进行调度配置，包括集成任务的名称、节点ID、节点类型，并配置对应责任人、描述等基本信息。本文将为您介绍离线集成任务属性的基本信息参数配置。操作步骤 请参见 离线...
周期性调度
步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会根据调度配置内容进行周期性运行。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。提交时需在 提交新版本 对话框中输入 变更描述，...
广告计划
拉取投放平台 产品推广>效果营销>通用场景 营销任务下，起始时间和结束时间在所选时间段、投放状态为 投放中/暂停中/已完成、币种和渠道所选币种一致的投放计划，进行任务领取、数据监测等操作。说明 非程序化对接媒体在投放平台开通 产品...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
新建HOLOGRES_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。详细说明请参见：计算任务运行配置。说明 如果离线计算任务的调度类型为 手动任务，需要手动触发任务...
流式ETL
说明文档 配置文档 通过DAG模式配置ETL任务 配置流程通过DAG模式配置ETL任务 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS迁移或同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中...
离线同步能力说明
示例：创建一个离线同步任务，每天从源MySQL订单表中同步前一天新产生的订单数据到MaxCompute目标表的当天分区，原表订单的创建时间字段为 gmd_created,目标odps表的分区字段为 ds，可以将任务配置如下：同步任务配置：调度参数配置：订单...
什么是ETL
说明文档 配置文档 通过DAG模式配置ETL任务 配置流程 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS 迁移或 同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中配置ETL典型应用
LogHub（SLS）实时ETL同步至Hologres
完成上述所有任务配置后，并完成模拟运行验证配置正确、写入结果符合预期，单击 完成配置 按钮，完成同步任务配置。任务运维 启动同步任务 完成配置之后，界面会自动跳转到 任务列表，您可以单击对应任务的 启动 按钮，启动同步任务。查看...
创建安全数据加密任务
进入任务页面配置任务参数 步骤二：配置任务参数信息 在 创建任务 页面，配置参数。参数 描述 任务名称 请填写任务的名称。任务类型 任务类型默认是TrustDA/PSI，不支持修改。加密采用的椭圆曲线 支持选择x25519、secp256k1、sm2三种椭圆...
创建ID安全匹配任务
进入任务页面配置任务参数 步骤二：配置任务参数信息 在 创建任务 页面，配置参数。参数 描述 任务名称 请填写任务的名称。任务类型 任务类型默认是TrustDA/PSI，不支持修改。加密采用的椭圆曲线 支持选择x25519、secp256k1、secp256r1、...
创建安全数据左对齐任务
进入任务页面配置任务参数 步骤二：配置任务参数信息 在 创建任务 页面，配置参数。参数 描述 任务名称 请填写任务的名称。任务类型 任务类型默认是TrustDA/LeftJoin，不支持修改。加密采用的椭圆曲线 支持选择x25519、secp256k1、sm2三种...
创建安全数据对齐任务
步骤二：配置任务参数信息 在 创建任务 页面，配置参数。参数 描述 任务名称 请填写任务的名称。任务类型 任务类型默认是TrustDA/PSI，不支持修改。加密采用的椭圆曲线 支持选择x25519、secp256k1、sm2三种椭圆权限。调度规则 支持 日常不...
使用DataWorks
通过向导模式配置并运行数据同步任务 配置网络与资源。选择数据来源。在 数据来源 下拉列表中选择数据源类型为 MaxCompute(ODPS)，并选择创建好的MaxCompute 数据源名称。选择独享数据集成资源组。选择已创建的独享数据集成资源组，详情请...
配置Serverless实例
前提条件 您的目标任务可以配置为Serverless实例。Serverless实例的使用限制和支持的地域，请参见 什么是DTS Serverless实例。操作步骤 进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与开发（DTS）。在左侧...
配置任务监控报警规则
Dataphin支持批量配置任务级和字段级的监控报警，任务级支持物理任务、逻辑表任务，字段级支持逻辑表字段，便于您及时发现并处理任务报警，同时提高任务监控报警配置的效率。本文为您介绍如何为任务和逻辑表字段配置监控报警规则。前提条件...
配置任务监控报警规则
Dataphin支持批量配置任务级和字段级的监控报警，任务级支持物理任务、逻辑表任务，字段级支持逻辑表字段，便于您及时发现并处理任务报警，同时提高任务监控报警配置的效率。本文为您介绍如何为任务和逻辑表字段配置监控报警规则。前提条件...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
离线管道任务运行配置
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略，离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
离线管道任务运行配置
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略，离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
逻辑表配置概述
逻辑表任务配置入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入逻辑表任务配置页面。配置逻辑表任务 在逻辑表任务配置页面，支持配置逻辑表任务的基本信息与调度相关属性。配置项 描述 基本信息 包括表类型、业务对象...
- 产品推荐
- 这些文档可能帮助您