实时计算任务运行与管理

DataWorks的实时计算任务页面为您展示了任务实例的基本信息及运行详情,方便您查看目标任务的运行情况。同时,您还可以为目标任务设置监控报警,在任务运行出错时及时发现并处理异常。使用限制 DataWorks当前仅支持对EMR Spark Streaming及...

管理数据同步任务

单击目标任务卡片中的 编辑 按钮。在新打开页面,即可编辑以下任务参数:任务名称 数据来源信息 数据去向信息 源端目的端字段及其主键 编辑完成后,单击 提交,保存修改。暂停任务 您可以暂停 运行中 的任务。在任务列表中,找到要暂停的...

单向同步升级至双向同步

前提条件 数据同步任务的源和目标数据库实例为支持双向同步的数据库类型版本。例如,源和目标数据库均为8.0版本的 MySQL。更多信息,请参见 同步方案概览。数据同步任务的同步拓扑为 单向同步。数据同步任务的状态为 运行中。费用说明 如...

补数据

在页面下方 任务流 区域单击目标任务流名称,进入目标任务流编辑页面。单击页面右上角的 前往运维。在 发布列表 页签下,单击目标任务流版本右侧 操作 列下的 补数据。配置补数据界面参数。指定补数据任务的业务时间,业务时间精确到秒。...

新版任务监控大盘常见问题

异常描述 在目标Project下,打开目标任务的概览页面时,提示 查询失败 错误,统计报表中未展示任何统计数据。异常原因 任务运行日志保存在指定Project下名为internal-diagnostic_log的Logstore中。当internal-diagnostic_log中的索引被删除...

Spring任务

spring schedule配置 定时任务代码的完整类名(class name)和任务的方法名(method name)。执行模式 执行模式,这里特指任务执行的模式,当前支持以下模式。单机运行:随机选一台机器执行。广播运行:所有机器同时执行并等待全部结束。...

DescribeScheduleTasks-查询定时任务详情

30 TaskAction string 否 任务类型,取值范围如下:CreateDBNodes ModifyDBNodeClass UpgradeDBClusterVersion ModifyDBClusterPrimaryZone 说明 仅当调用上述接口时指定了 PlannedStartTime 参数值,会返回目标任务的详情,否则 ...

DescribeScheduleTasks

Status String 否 finish 任务状态,取值范围如下:pending:等待执行中 executing:执行中 failure:执行失败待重试 finish:已完成 cancel:已取消 expired:超期(即未在计划时间段内开始执行目标任务)rollback:回滚中 说明 若该参数...

DescribeScheduleTasks

Status String 否 finish 任务状态,取值范围如下:pending:等待执行中 executing:执行中 failure:执行失败待重试 finish:已完成 cancel:已取消 expired:超期(即未在计划时间段内开始执行目标任务)rollback:回滚中 说明 若该参数...

创建管理订阅任务

退订任务 在 数据订阅 页面,找到您想要退订的目标任务,单击 退订 按钮。在弹出的确认对话框中,单击 确认。删除任务 在 数据订阅 页面,找到您想要删除的订阅任务,单击 删除 按钮。在弹出的确认对话框中,单击 确认。

任务列表

在任务列表管理的任务和支持的操作具体如下:RDS MySQL 任务列表管理的任务 任务 本地盘 云盘 创建实例 支持 支持 参数调整 支持 支持 配置变更 支持 支持 重启实例 支持 支持 克隆实例 支持 支持 内核小版本升级 支持 支持 账号变更 支持 ...

任务列表

在任务列表管理的任务和支持的操作具体如下:RDS MySQL 任务列表管理的任务 任务 本地盘 云盘 创建实例 支持 支持 参数调整 支持 支持 配置变更 支持 支持 重启实例 支持 支持 克隆实例 支持 支持 内核小版本升级 支持 支持 账号变更 支持 ...

任务列表

在任务列表管理的任务和支持的操作具体如下:RDS MySQL 任务列表管理的任务 任务 本地盘 云盘 创建实例 支持 支持 参数调整 支持 支持 配置变更 支持 支持 重启实例 支持 支持 克隆实例 支持 支持 内核小版本升级 支持 支持 账号变更 支持 ...

计算资源

另外分布式系统中不同节点之间可能会竞争有限的计算资源,例如某个节点过度占用了计算资源,导致其他节点无法获得足够的资源,这会导致性能下降和任务延迟。计算资源分配不均可能会导致系统性能下降、任务延迟增加、资源浪费等。常见的容错...

任务监控大盘异常处理

任务监控大盘报错处理 异常描述 在目标Project下,打开目标任务的概览页面时,提示 查询失败 错误,统计报表中未展示任何统计数据。异常原因 任务运行日志保存在指定Project下名为internal-diagnostic_log的Logstore中。当internal-...

如何将任务调度应用优雅下线

spring.schedulerx2.httpServerPort=52333 下线模式 描述 等待全部(WAIT_ALL)(推荐)该模式下,待所有已接收的任务和子任务执行完成后,应用才退出。等待运行中(WAIT_RUNNING)该模式下,应用在退出时,将等待已分配线程并在处理中的...

数据同步概述

新建同步任务目标表,详情请参见 新建同步目标表。新建同步任务,详情请参见 新建同步任务。配置同步任务,详情请参见 配置同步任务。说明 系统默认为同步任务分配0.5核CPU、1GB内存,暂不支持扩大资源量。配置同步任务的调度参数,详情...

数据同步概述

新建同步任务目标表,详情请参见 新建同步目标表。新建同步任务,详情请参见 新建同步任务。配置同步任务,详情请参见 配置同步任务。说明 系统默认为同步任务分配0.5核CPU、1GB内存,暂不支持扩大资源量。配置同步任务的调度参数,详情...

UpdateDIProjectConfig

DestinationType String 是 odps 数据集成同步解决方案任务的目的端数据源。该参数不能为空。调用UpdateDIProjectConfig修改同步解决方案的全局配置,目前仅支持配置目的端数据源为analyticdb_for_mysql、odps、elasticsearch、holo、mysql...

ALIYUN:SLS:Etl

ALIYUN:SLS:Etl类型用于创建数据加工任务。语法 {"Type":"ALIYUN:SLS:Etl","Properties":{"Description":String,"Configuration":Map,"ProjectName":String,"Schedule":Map,"DisplayName":String,"Name":String } } 属性 属性名称 类型 ...

创建恢复任务

如果数据库的数据已被勒索病毒入侵,您可以创建恢复任务恢复被勒索病毒加密的数据,降低勒索病毒给您带来的损失。本文介绍如何创建恢复任务、查看恢复任务状态。前提条件 已为该数据库创建防护策略并且该策略运行正常(可以正常备份数据库...

创建查看DataWorks导出任务

黑名单 您可以根据业务需求决定是否选中 添加黑名单,以筛选全量导出过程中无需导出的任务和资源。导出版本格式 包括 公共云、专有云(V3.12及以上)和 专有云(V3.6.1-V3.11)。DataWorks上不同版本的数据格式不一致,请先确认待导入环境...

导入结构数据

操作 单击查看按钮进入任务详情页面以查看目标任务的任务详情和任务日志。任务信息 如上图所示,在导入任务列表中单击查看按钮。弹出目标任务的任务详情面板,单击任务信息标签查看任务基本信息、导入文件信息和导入对象信息。信息项 说明 ...

导出结构数据

操作 单击 查看 按钮进入任务详情页面以查看目标任务的 任务详情 任务日志。任务信息 如上图所示,在 导出 任务列表中单击 查看 按钮。弹出目标任务的任务详情面板,单击 任务信息 查看任务基本信息、导出文件信息和导出对象信息。信息...

开启监控任务

监控任务创建完成后,可以通过监控开关控制监控任务的运行状态。本文介绍了如何开启监控任务。前提条件 已创建监控任务,具体操作,请参见 手动创建监控任务、批量创建监控任务。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 ...

开启监控任务

监控任务创建完成后,可以通过监控开关控制监控任务的运行状态。本文介绍了如何开启监控任务。前提条件 已创建监控任务,具体操作,请参见 手动创建监控任务、批量创建监控任务。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,...

RDS PostgreSQL间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

RDS PostgreSQL间的双向同步

警告 选择源和目标实例后,建议您仔细阅读页面上方显示的 使用限制,否则可能会导致任务失败或数据不一致。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。源库信息 ...

MySQL实例间的双向同步

若源自建MySQL同时为双向同步任务和其他任务的源库,您需要在源库/etc/my.cnf 中增加一行 log_slave_updates=1,然后重启数据库。否则会导致反向任务的数据变更不会被记录到源自建MySQL的Binlog,从而导致其他任务数据不一致。当源库为RDS ...

云数据库MongoDB版(分片集群架构)间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

云数据库MongoDB版(分片集群架构)间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

云数据库MongoDB版(副本集架构)间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

云数据库MongoDB版(副本集架构)间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

MySQL实例间的双向同步

若源自建MySQL同时为双向同步任务和其他任务的源库,您需要在源库/etc/my.cnf 中增加一行 log_slave_updates=1,然后重启数据库。否则会导致反向任务的数据变更不会被记录到源自建MySQL的Binlog,从而导致其他任务数据不一致。费用说明 ...

配置RDS MySQL间的数据集成任务

本文以配置RDS MySQL间的数据集成任务为例,介绍数据集成任务的配置流程注意事项。说明 新版DTS控制台暂不支持数据集成功能,您可以在数据管理DMS控制台配置离线集成任务,详情请参见 离线集成概述。支持全量数据迁移的数据源均支持数据...

RDS MySQL与PolarDB MySQL版间的双向同步

双向同步实例包含正向反向同步任务,在配置或重置双向同步实例时,若其中一个任务目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...

PolarDB MySQL版集群间的数据迁移

配置迁移任务的源库和目标库连接信息。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。源库信息 实例类型 选择 PolarDB。实例地区 选择源 PolarDB MySQL版 集群所属的...

从RDS MySQL迁移至PolarDB MySQL版

配置迁移任务的源库和目标库连接信息。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。源库信息 实例类型 选择 RDS实例。实例地区 选择RDS实例所属的地域。数据库账号...

从PolarDB MySQL版迁移至RDS MySQL

配置迁移任务的源库和目标库连接信息。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。源库信息 实例类型 选择 PolarDB。实例地区 选择源 PolarDB MySQL版 集群所属的...

从RDS MariaDB迁移至RDS MySQL

配置迁移任务的源库和目标库连接信息。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。源库信息 实例类型 选择 RDS实例。实例地区 选择源RDS MariaDB实例所属的地域。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云工作流 商标服务 域名 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用