配置 SCQL 项目
您可以根据业务需求对项目中的节点、数据和成员进行配置，只有成功配置项目后，才可以进入项目开发阶段。本文介绍在管理控制台中，配置 SCQL 项目的操作步骤。前提条件 在配置 SCQL 项目前，请确认您已经完成了以下操作：确认已安装、部署...
创建业务流程
本文为您介绍如何创建业务流程，在业务流程中创建节点并配置依赖关系。完成创建后，您可以利用数据开发功能，对工作空间的数据进行深入分析和计算。前提条件 开始本操作前，请确保您已经在工作空间中准备好业务数据表 bank_data 和其中的...
缩容集群数据节点
当您的业务处于流量低峰期或集群中的数据量减少时，可通过阿里云Elasticsearch的数据节点缩容功能，减少集群中数据节点的数量。本文介绍如何缩容集群中的数据节点。前提条件 登录Kibana控制台，执行以下命令，检查集群中是否存在状态为...
自定义API
节点配置 在业务逻辑编辑页面的 节点 中，选择对应功能节点配置业务流，该节点配置如下。配置项 说明 节点名称 设置节点名称。支持中文汉字、英文字母、数字和下划线（_），长度不超过30个字符。请求方式 自定义API的请求方法支持POST和GET...
配置 FL 项目
您可以根据业务需求对项目中的节点、数据和成员进行配置，只有成功配置项目后，才可以进入项目开发阶段。本文介绍在管理控制台中，配置 FL 项目的操作步骤。前提条件 在配置 FL 项目前，请确认您已经完成了以下操作：确认已安装、部署节点...
配置 PSI 项目
您可以根据业务需求对项目中的节点、数据和成员进行配置，只有成功配置项目后，才可以进入项目开发阶段。本文介绍在管理控制台中，配置 PSI 项目的操作步骤。前提条件 在配置 PSI 项目前，请确认您已经完成了以下操作：确认已安装、部署...
规格及选型
案例七：大型互联网企业 用户为大型互联网企业，各业务线具有各自独立的业务中台，企业存在统一的数据中台，希望可以快速部署独立资源支持不同的业务负载，且未来不会产生数据孤岛。建议：使用 AnalyticDB PostgreSQL版 Serverless版本，...
移除节点
如果您没有通过容器服务控制台，而是直接在ECS或者ESS控制台（或相关API）主动释放节点、移除实例，或者因包年包月到期而被动释放节点，那么节点或实例就会直接停机，自动从容器服务控制台中移出。如果节点池设置了期望节点数，那么节点池...
配置 MPC 项目
您可以根据业务需求对项目中的节点、数据和成员进行配置，只有成功配置项目后，才可以进入项目开发阶段。本文介绍在管理控制台中，配置 MPC 项目的操作步骤。前提条件 在配置 MPC 项目前，请确认您已经完成了以下操作：确认已安装、部署...
创建业务流程
如果超过4层，可能说明您规划的业务流程结构过于复杂，建议将该业务流程拆分成两个或多个业务流程，并将相关的业务流程收纳到一个解决方案中进行管理，提升工作效率。周期业务流程与手动业务流程 DataWorks提供了 周期业务流程 和 手动业务...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
ES实例节点配置说明
冷数据节点 如果您的业务中同时存在以下2种类型的数据索引，建议购买冷数据节点分离冷热数据。冷热集群架构可以提高集群的处理性能和服务稳定性。查询频率高或写入压力大的索引。查询频率低基本无写入的索引（通常为历史数据索引）。更多...
RemoveNodePoolNodes-移除节点池节点
当您不再需要集群节点继续工作时，可以调用RemoveNodePoolNodes接口将集群中的节点移出节点池，并同时调整期望节点数。移除节点时，您可以选择是否同时释放ECS、是否自动排空节点。移除节点会涉及Pod迁移，可能会影响业务，请在业务低峰期...
RemoveNodePoolNodes-移除节点池节点
当您不再需要集群节点继续工作时，可以调用RemoveNodePoolNodes接口将集群中的节点移出节点池，并同时调整期望节点数。移除节点时，您可以选择是否同时释放ECS、是否自动排空节点。移除节点会涉及Pod迁移，可能会影响业务，请在业务低峰期...
数据节点管理
背景介绍 PolarDB-X 的数据节点管理功能支持存储资源池和数据节点单独升降配，实现数据节点的精细化管理与资源隔离，以适应多样化业务场景需求，进而有效提升整体资源使用率。存储资源池，即将DN存储节点划分为互不交叉的池，支持在单个...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
添加Shard节点
本文介绍为云数据库MongoDB分片集群实例中添加Shard节点的方法。使用限制 您需要确保新增节点的配置大于或等于当前实例中最高配置的Shard节点。例如：当前实例中最高配置的Shard节点的存储空间为10 GB，则新增Shard节点的配置必须大于或...
移除边缘节点
您可以从已经创建的边缘托管集群中移除不需要的工作负载节点。本文介绍如何移除边缘节点。索引 前提条件 注意事项 操作步骤 相关文档 前提条件 已创建边缘托管版集群 已通过kubectl连接Kubernetes集群 注意事项 移除节点涉及Pod迁移，可能...
云市场API
节点配置 在业务逻辑编辑页面的 节点 中，选择对应功能节点配置业务流，该节点配置如下。配置项 说明 节点名称 设置节点名称。支持中文汉字、英文字母、数字和下划线（_），长度不超过30个字符。请求方式 在 阿里云云市场 API购买页，查看...
加工数据
本文将为您介绍如何通过DataWorks中的EMR Hive节点加工采集的日志数据。前提条件 开始本实验前，请首先完成 采集数据 中的操作。创建函数 上传资源 下载 ip2region-emr.jar。在 数据开发 页面打开WorkShop业务流程，右键单击 EMR，选择 ...
数据分析
节点配置 在业务逻辑编辑页面的 节点 中，选择对应功能节点配置业务流，数据分析配置页面如下图所示。配置项 说明 节点名称 设置节点名称。支持中文汉字、英文字母、数字和下划线（_），长度不超过30个字符。接口 单击 数据API，选择 物...
查看节点所属的可用区
部署建议 为进一步满足业务场景中高可靠性和数据安全需求，云数据库MongoDB版提供了同城容灾解决方案。该方案将副本集中的节点或分片集群实例中的组件分别部署在同一地域下三个不同的 可用区，当三个可用区中的任一可用区因电力、网络等不...
数据开发与运行
当业务流程中包含多个节点时，是否可以批量配置节点的调度信息？如何克隆业务流程？表 如何可视化新建表？如何对生产表添加字段？如何删除表？如何将本地数据上传到MaxCompute表中？为什么EMR通过DataWorks可视化建表失败报错：call emr ...
DeleteClusterNodes-移除集群节点
当您不再需要集群节点继续工作时，可以调用DeleteClusterNodes接口将集群中的节点移出集群。移除节点时，您可以选择是否同时释放ECS、是否自动排空节点。移除节点会涉及Pod迁移，可能会影响业务，请在业务低峰期操作并提前做好相关的数据...
DeleteClusterNodes-移除集群节点
当您不再需要集群节点继续工作时，可以调用DeleteClusterNodes接口将集群中的节点移出集群。移除节点时，您可以选择是否同时释放ECS、是否自动排空节点。移除节点会涉及Pod迁移，可能会影响业务，请在业务低峰期操作并提前做好相关的数据...
OSS对象检查节点
DataWorks支持通过OSS对象检查节点检查OSS指定路径的文件是否存在，当下游任务需依赖该OSS文件时，您可使用此功能先检查文件是否...解决方案：请检查OSS文件路径是否填写正确，是否携带文件后缀。请检查调度参数替换值与文件名称是否匹配。
创建业务监控链路（邀测中）
您可以按照业务视角自定义配置多个业务监控链路，对配置的业务监控链路，可快速开启或关闭，以及任务的导入编排、链路的导入导出。本文介绍了如何创建业务监控链路。前提条件 已创建监控任务，具体操作，请参见 手动创建监控任务、批量创建...
智能负载均衡
通过多节点智能接入技术，助力您业务的应用防护接入支持多节点、多线路自动调度容灾，保证业务“高可用”和“加速”的访问体验。适用场景 智能负载均衡能力帮助您实现网络与业务自动容灾的高可靠性并提供低时延、访问“加速”的业务体验，...
使用gig流控插件
针对分布式环境中，偶发的节点异常导致的查询抖动问题，能够做到秒级切流，最大程度降低业务抖动概率，保证查询业务平稳运行。同时能够通过流量探测的方式，解决冷节点上线导致的查询延迟飙升问题，实现在线服务的查询预热功能。本文介绍...
Shell节点
Shell节点使用资源 在DataWorks节点使用资源时，需要先将资源上传至DataWorks，并通过节点引用资源的方式，将资源加载入节点运行环境后，才可以在节点中使用资源。具体操作如下。创建资源 DataWorks支持通过新建资源或上传已有资源两种方式...
流程交互
这些特殊的场景在实际业务过程中，经常会遇到，而且不同业务系统会有不同的流程。将这些与第三方系统交互的流程抽象成为具体的功能，即为节点事件，而将节点事件串到流程中的功能即为流程交互。功能说明 流程交互为CIAM与第三方系统交互...
选型配置说明
Utility节点的选型 在一个集群中仅需部署一台工具节点，工具节点主要用于部署CM（CDP的管控），以及Hive Metastore，Hue以及集群的元数据信息。针对高可用集群，工具节点还会用于部署HDFS 的JournalNode以及ZooKeeper的Server。针对高安全...
配置for-each节点
遍历节点的内部节点获取参数 根据业务需求自定义for-each遍历节点的内部业务流程，并在内部流程的节点中通过内置变量来获取所需参数值，运行循环遍历任务。内置变量的详情请参见 内置变量，配置详情请参见 配置for-each节点。遍历节点不...
PolarDB代理配置与流量异常
PolarDB 集群支持读写分离方式接入业务，但在实际业务场景中，经常出现节点上流量负载不均，可能导致单节点承担大量的流量从而被拖垮，最终造成整个集群雪崩。本文主要描述 PolarDB 代理的配置方法以及流量不均时如何定位处理。数据库代理...
配置do-while节点
DataWorks为您提供循环节点（do-while节点），您可以重新编排do-while节点内部的业务流程，将需要循环执行的逻辑写在节点内，再编辑end循环判断节点来控制是否退出循环。同时您也可以结合赋值节点来循环遍历赋值节点传递的结果集。本文通过...
数据开发常见问题
当业务流程中包含多个节点时，是否可以批量配置节点的调度信息？如何克隆业务流程？如何对节点、资源、函数等进行相关批量修改相关属性的操作？如何在数据开发页面批量修改业务流程下节点使用的调度资源组？API调用 Openapi调用报错access ...
创建并使用PAI Designer
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，因此，创建节点前需先新建业务流程，操作详情请参见 创建业务流程。步骤一：创建PAI Designer节点 进入数据开发页面。登录 DataWorks控制台，单击左侧导航栏的 数据...
常见问题
E-HPC集群使用NAS实现计算节点间的数据共享，因此自行手动安装业务软件有以下两种方案：安装在/opt目录，该方案下所有集群用户可以访问并使用业务软件。安装在集群用户的home目录，一般情况下仅该集群用户可以访问并使用。重要 某些软件...
配置代码模板
代码模板是在创建节点后，默认展示在该节点代码编辑器界面最前端的内容，包括节点类型、节点的创建用户、节点的创建时间等信息，帮助您快速标记该节点。通常用于业务层进行节点管理。本文为您介绍DataWorks支持的代码模板类型及如何设置...
- 产品推荐
- 这些文档可能帮助您