配置自定义任务参数
自定义参数配置 配置自定义任务参数，参数需要与Dataphin系统绑定的计算引擎源的特性一致，示例如下。set odps.sql.mapper.cpu=100 set odps.sql.mapper.split.size=256 set odps.sql.reducer.cpu=100 set odps.sql.joiner.cpu=100 说明 ...
日志审计合规
外部配置 无 消除方法 在日志审计服务中的 审计配置>云产品接入>全局配置 中开启云安全中心日志的审计开关，并确保存储时长大于规则参数配置中设定的 存储时长（ttl）最小值。前提条件 无 RDS日志审计配置检测 告警ID sls_app_audit_cis_at...
账号安全
RAM用户登录控制台时需要开启MFA，且其登录次数小于等于规则参数配置中设定 最大登录次数，否则会触发告警。执行频率 固定时间间隔：4分钟 查询范围 过去5分钟 参数配置 严重度：严重、高、中、低、报告。默认值为中。最大登录次数：每5...
配置全局参数
本文为您介绍跳转、邮件订阅和报表嵌入等场景的全局参数配置方法。背景信息 在报表的使用过程中，用户经常有这样的需求：以一个销售团队为例，如果该销售团队的业务范围是全国，那么意味着该销售团队需要随时掌握30多个省的销售情况，而且...
配置并使用调度参数
确认生产环境任务的调度参数配置 配置调度参数，并验证参数执行情况的完整示例，详情请参见 完整配置示例。定义变量 您可根据业务需求，参考下图步骤在代码中自定义变量，并在 调度配置>参数 中为变量赋值。说明 部分节点会自带${bizdate} ...
新建层级维度逻辑表
步骤三：配置层级维度逻辑表调度&参数配置 在 调度&参数配置 页面，配置维度逻辑表的 数据延迟、调度属性、调度依赖、调度参数、运行配置。各配置说明如下：数据延迟：开启数据延迟，系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部...
新建层级维度逻辑表
步骤三：配置层级维度逻辑表调度&参数配置 在 调度&参数配置 页面，配置维度逻辑表的 数据延迟、调度属性、调度依赖、调度参数、运行配置。各配置说明如下：数据延迟：开启数据延迟，系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部...
逻辑表运行参数配置
逻辑表参数配置是对逻辑表中所用的变量进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。本文将指导您如何配置逻辑表参数。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。进入数据 开发 页面。在数据 开发 页面，...
逻辑表运行参数配置
逻辑表参数配置是对逻辑表中所用的变量进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。本文将指导您如何配置逻辑表参数。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。进入数据 开发 页面。在数据 开发 页面，...
参数配置
通过参数配置，可对Notebook或SQL查询中的SQL代码中所使用的参数变量进行赋值，在SQL代码运行时，参数变量可以自动被替换为相应的值。本文为您介绍如何配置参数。操作步骤 在Dataphin首页，单击顶部菜单栏 分析，进入 分析 平台。按照下图...
参数配置
通过参数配置，可对Notebook或SQL查询中的SQL代码中所使用的参数变量进行赋值，在SQL代码运行时，参数变量可以自动被替换为相应的值。本文为您介绍如何配置参数。操作步骤 在Dataphin首页，单击顶部菜单栏 分析，进入 分析 平台。按照下图...
Hologres整库周期性增全量同步至MaxCompute
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
实时模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
实时模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
离线模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
AnalyticDB for MySQL3.0整库周期性增全量同步至...
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
离线模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
逻辑表调度配置概述
参数配置 逻辑表参数配置是对逻辑表中所用的变量进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。运行配置 您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间...
配置config.xml参数
在左侧导航栏，单击 参数配置。在 参数配置 页面，单击 配置 页签。选择 默认模式 或 XML模式，对参数进行修改。单击 运行参数值 列中的修改按钮，进入参数编辑状态，您可以根据提示的输入范围，输入参数值，并点击 确定，或单击 取消 退出...
使用自定义组件
进入 新建组件 页面，创建Pytorch类型的自定义组件，详细操作步骤与更多参数配置说明，请参见 创建自定义组件，本示例的核心配置要点如下。执行配置 参数 描述 任务类型 选择Pytorch。执行镜像 选择 社区镜像：pytorch-training:1.12-cpu-...
实时模式运行参数配置
在开发实时任务时，通常需要配置任务的运行参数，以控制任务的执行行为和性能。例如，JobManager进程的内存大小、TaskManager中slot的超时时间等。本文将为您介绍如何配置任务实时模式的运行参数。...单击 确定，完成实时模式的运行参数配置。
界面概览
③参数配置区 您在流程画布中定制的流程中，单击任意一个状态，即可在右侧的 参数配置区 配置和查看状态属性。状态浏览区 在状态浏览区，在 操作、流程 和 模式 页签的列表中，选择您要拖放到画布中的状态节点（API）或流程节点。您也可以...
实时模式运行参数配置
在开发实时任务时，通常需要配置任务的运行参数，以控制任务的执行行为和性能。例如，JobManager进程的内存大小、TaskManager中slot的超时时间等。本文将为您介绍如何配置任务实时模式的运行参数。...单击 确定，完成实时模式的运行参数配置。
设置全局Spark参数
找到目标 E-MapReduce集群，单击 SPARK参数，进入全局SPARK参数配置页面。设置全局Spark参数。单击 Spark参数 页面右上角的 编辑SPARK参数，配置各模块的全局SPARK参数及优先级。说明 该配置为工作空间全局配置，请在配置前确认所使用的...
创建局点与交付内容管理
配置完交付内容之后，在交付参数模块可以继续在底座配置栏中调整ADP底座的相关参数以及ADP底座组件的配置参数，同样在产品名称对应的Tab页下可以编辑产品对应的全局交付参数以及某些组件的交付参数 交付参数配置说明 产品交付参数配置主要...
自定义消息渠道配置
说明 选择POST请求参数配置支持 Headers、Parameters 和 Body。选择GET请求参数配置支持 Headers、Parameters。请求参数配置 Headers：单击+新建 按钮，配置 Headers 参数。key：自定义key值，Key值不可重名，在所有参数中参数名唯一。...
VPC操作合规
执行频率 固定时间间隔：1分钟 查询范围 过去2分钟 参数配置 严重度：严重、高、中、低、报告。默认值为低。外部配置 允许VPC网络路由配置变更的账号白名单。白名单中的账号进行VPC网络路由配置变更时，不会触发告警。消除方法 禁止白名单...
MySQL整库离线同步到OSS
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
配置HTTP响应头
变更响应头参数 配置项 示例 说明 响应头操作 变更 当响应头参数不存在重复时，可以正常变更参数，如果有多个重复的响应头参数，则不允许变更。自定义响应头参数 自定义缓存响应头 选择 自定义缓存响应头 或选择已经预设好的响应头参数。...
可视化部署传统型负载均衡CLB
完成各产品参数配置。配置CLB。配置ECS，支持批量绑定ECS到CLB默认服务器组。分别双击CLB与ECS之间的连线，配置监听。重新保存应用并进行部署，部署完成后，单击CLB实例名称，前往控制台验证资源部署情况。验证部署结果。验证监听配置。...
配置短信消息渠道
说明 选择POST请求参数配置支持 Headers、Parameters 和 Body。选择GET请求参数配置支持 Headers、Parameters。请求参数配置 Headers：单击+新建 按钮，配置 Headers 参数。key：自定义key值，Key值不可重名，在所有参数中参数名唯一。...
配置电话消息渠道
说明 选择POST请求参数配置支持 Headers、Parameters 和 Body。选择GET请求参数配置支持 Headers、Parameters。请求参数配置 Headers：单击+新建 按钮，配置 Headers 参数。key：自定义key值，Key值不可重名，在所有参数中参数名唯一。...
操作步骤
关于此任务 API 包括以下类型的参数配置：基础信息配置：API 名称、接口描述、接入系统等，不同类型的 API 服务还具备不同的属性。高级配置：签名校验、ETag 缓存、超时时间。header 设置：网关支持为所有请求添加或者删除 header。限流...
新建BLINK_SQL任务
配置说明，请参见 实时模式时间参数配置。Checkpoint配置：配置Flink SQL任务的Checkpoint，可有效的帮助当前Flink SQL任务运行意外崩溃后，重新运行程序时恢复到崩溃前的状态。配置说明，实时模式Checkpoint配置。State配置：配置State中...
新建BLINK_SQL任务
配置说明，请参见 实时模式时间参数配置。Checkpoint配置：配置Flink SQL任务的Checkpoint，可有效的帮助当前Flink SQL任务运行意外崩溃后，重新运行程序时恢复到崩溃前的状态。配置说明，实时模式Checkpoint配置。State配置：配置State中...
配置Java启动参数
在 应用高级设置 页签展开 Java启动参数配置，单击 Java启动参数配置 右侧的 编辑，并根据您的业务需求完成以下配置。参数 描述 内存配置 您可完成以下参数的配置：初始堆内存：初始化的堆大小，单位为MB，0表示不限制使用大小。最大堆内存...
配置HTTP请求头
变更请求头参数 配置项 示例 说明 请求头操作 变更 当请求头参数不存在重复时，可以正常变更参数，如果有多个重复的请求头参数，则不允许变更。自定义请求头参数 自定义回源请求头 选择 自定义回源请求头 或选择已经预设好的请求头参数。...
VPN配置
在 新建VPN网关 页面参考以下表格完成参数配置。参数 说明 名称 填写服务器的名称。连接协议 选择连接的协议。服务器地址 选择服务器地址。可选择 域名 或 IP地址。支持的认证方式 选择支持的认证方式。说明 如果连接协议选择 OPENVPN，您...
新建FLINK_SQL任务
配置说明，请参见 实时模式时间参数配置。Checkpoint配置：配置Flink SQL任务的Checkpoint，可有效的帮助当前Flink SQL任务运行意外崩溃后，重新运行程序时恢复到崩溃前的状态。配置说明，实时模式Checkpoint配置。State配置：配置State中...
新建FLINK_SQL任务
配置说明，请参见 实时模式时间参数配置。Checkpoint配置：配置Flink SQL任务的Checkpoint，可有效的帮助当前Flink SQL任务运行意外崩溃后，重新运行程序时恢复到崩溃前的状态。配置说明，实时模式Checkpoint配置。State配置：配置State中...
- 产品推荐
- 这些文档可能帮助您