API列表
GetNodeGroupTransferPacketsDownloadUrl 获取节点分组上下行数据CVS文件 ListNodeTransferPacketPaths 获取节点上行路径详情 GetNodeTransferPacket 获取数据包历史详情 ListGatewayTransferFlowStats 获取网关流量统计 ...
错误码
常见 PolarDB-X 数据节点连接失败的原因如下：后端数据节点连接数已满 计算节点到数据节点的连接超时 数据节点拒绝连接 如果排除后端数据节点问题后仍然出现该错误，请联系技术支持。PXC-4103 ERR_ATOM_CONNECTION_POOL_FULL 描述：PolarDB...
实例指标
实例指标包含查询节点、数据节点-查询相关、数据节点-实例相关、数据节点-数据处理四块的监控数据。指标项说明 指标项说明 QRS（查询节点）指标项 含义 qps 查询节点的qps emptyQps 查询结果为空的qps errorQps 查询报错的qps（包括语法...
实例指标
rerankLatency 数据节点上精排所需要时间 matchCount 数据节点匹配结果数，准确值 matchDocSize 数据节点第一阶段返回的 matchDoc 实际数量 seekCount 数据节点查询总count数，准确值 seekDocCount 数据节点上seek doc 数 phase1EmptyQps ...
DescribeDataPushResult-查询应用数据预推结果
调用DescribeDataPushResult获取应用的数据文件在边缘节点的预推状态结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的...
API概览
DescribeDataPushResult 查询应用数据预推结果 调用DescribeDataPushResult获取应用的数据文件在边缘节点的预推状态结果。DescribeDataDownloadURL 查询应用数据下载地址 调用DescribeDataDownloadURL获取应用数据在文件服务器的下载地址，...
do-while节点逻辑原理介绍
节点组成与流程编排 DataWorks的do-while节点是包含内部节点的一种特殊节点，您在创建完成do-while节点时，同时也自动创建完成了三个内部节点：Start节点（循环开始节点）、Shell节点（循环任务节点）、End节点（循环结束判断节点），通过...
区域下钻热力层（v2.x版本）
登入 DataV.GeoAtlas，获取得到浙江省范围的JSON数据（复制如下图所示API地址后打开该网址，另存为.json文件即可。登入 geojson.io 网站，单击左上角 Open>File，将获取到的浙江省范围的JSON数据添加到geojson.io右侧编辑框内。单击左上角 ...
概述
技术架构 集群中所有读写节点的数据文件都存放在共享存储（PolarStore）中，全局只读节点通过分布式文件系统（PolarFileSystem）来共享底层存储（PolarStore）中已有的读写节点的数据文件。您可以通过全局只读地址连接全局只读节点，通过...
Link WAN API授权映射表
GetNodeGroupTransferPacketsDownloadUrl linkwan:GetNodeGroupTransferPacketsDownloadUrl acs:linkwan:*:*:diagram 与 acs:linkwan:*:*:node-group/${nodeGroupId} 获取节点分组数据包详情报表下载URL。ListGatewayTransferFlowStats ...
其他问题
当两个节点的调度周期不同时，即上游节点5分钟调度一次，下游节点20分钟调度一次，下游节点如何获取数据？为何周期调度中某个节点的实例实际运行时间和计划时间有差异？任务执行是按照业务连线的先后顺序执行，即当前一节点运行结束，后一...
核对模板
选择 文件-文件、文件-DB 或 DB-DB 时，需填写如下内容（以 文件-文件 为例）：文件 1：选择用于核对的数据节点，只能选择一个。如果数据节点还未创建，可直接单击右侧的 新建数据节点。详情请参见 创建数据节点。文件 2：选择用于核对的...
Azure Cosmos DB API for MongoDB迁移至阿里云
获取阿里云MongoDB数据库的Primary节点连接地址，详情请参见 实例连接说明。在安装有MongoDB服务的Linux服务器上执行以下语句将数据库数据全部导入至阿里云MongoDB数据库。mongorestore-host<mongodb_host>:3717-authenticationDatabase ...
登录集群
通过与集群主节点建立SSH连接，您可以使用终端上的Linux命令来管理和与集群进行交互操作。此外，您还可以使用SSH连接创建隧道，以便通过Web浏览器查看开源组件的Web页面。本文为您介绍如何在Windows和Linux环境中使用SSH方式（SSH密钥对或...
添加已有节点
如果购买ECS实例后需将该云服务器添加到ACK集群中作为Worker节点，或移除Worker节点后需将节点实例重新加入节点池，您可以在容器服务管理控制台自动添加或手动添加节点。添加前，请仔细阅读使用限制、注意事项等。前提条件 已创建...
通过SSH隧道方式访问开源组件Web UI
ssh-i<密钥文件路径>-N-L 8157:<主节点主机名>:8088 root@<主节点公网IP地址>密码方式 ssh-N-L 8157:<主节点主机名>:8088 root@<主节点公网IP地址>相关参数描述如下：L：使用本地端口转发，您可以指定一个本地端口，用于将数据转发到主节点...
API调用节点说明
当返回是个json object，例如返回数据为{"a":1,"b":"cc"}，后方节点获取其中的数据a的表达式为${svcVars.Api_xxx.response.a} 当返回是个json array，例如返回数据为[{"a":1},{"a":3,"b":"cc"}]，后方节点获取其中的第一条数据a的表达式为$...
阶段三：数据安全持续运营
场景二：数据违规流转准实时告警 开发者在开发环境中使用数仓数据构建应用时，可能存在 将ODS层数据同步至分析层项目空间、将分析层数据同步至数据仓库之外的存储介质（业务数据库或对象存储）等情况，此类行为极易造成数仓分析层数据可用...
API概览
GetFileProtectDashboard 获取文件保护看板数据 获取核心文件监控功能大盘信息，包括生效规则数量、插件安装情况等。ListFileProtectEvent 获取核心文件保护告警事件列表 根据相关条件，筛选出符合条件的规则列表。DeleteFileProtectRule ...
配置数据传输中转节点
使用新购ECS作为数据传输中转节点 上传下载文件数据需要占用ECS公网带宽，建议您新购一台ECS实例专门负责文件数据的上传与下载，避免占用业务带宽。新购ECS挂载NAS文件系统有以下限制：镜像：仅支持ECS官方自营镜像配置自动挂载NAS。如果...
for-each节点逻辑原理介绍
节点组成与流程编排 DataWorks的for-each节点是包含内部节点的一种特殊节点，您在创建完成for-each节点时，同时也自动创建完成了三个内部节点：Start节点（循环开始节点）、Shell节点（循环任务节点）、End节点（循环结束判断节点），通过...
NFS协议
NFSv3和NFSv4.0差异 功能 NFSv4.0：是一种有状态的协议，自身实现了文件锁功能和获取文件系统根节点功能。NFSv3：对文件锁无感知，同时挂载时可能会覆盖掉v4写入的部分。安全性 NFSv4.0增加了安全性，支持RPCSEC-GSS身份认证。请求 NFSv4.0...
RDS MySQL物理备份文件恢复到自建数据库
本文介绍如何使用Percona XtraBackup工具，将RDS MySQL的物理备份文件恢复到自建数据库。背景 RDS MySQL支持将实例备份文件恢复到自建数据库，当前支持物理备份文件恢复、逻辑备份文件恢复等多种方式。如何选择数据恢复方案，请参见 数据...
如何选择文件引擎规格
可以从两个维度确定您的场景需要的文件引擎节点数量：数据量维度：每个文件引擎节点可支撑10TB～50TB存储容量 带宽维度：每个文件引擎节点可支撑 100MB/s~200MB/s 数据传输带宽 可以根据您的需求，从数据量维度与带宽维度计算出所需的文件...
配置脚本代码节点
通过任务编排中的脚本代码可以实现周期性或定时运行脚本，本文介绍配置基于数据库网关的脚本代码节点。背景信息 很多任务以脚本的方式存在于服务器中，脚本代码节点结合数据库网关，可以实现这些脚本的统一调度。例如：使用高级的工具...
远程获取并解析PolarDB MySQL版Binlog日志
Binlog获取策略 连接方式 Binlog获取策略 主地址 默认集群地址 包含主节点的自定义集群地址 均从主节点获取。说明 如何设置集群连接地址，请参见 配置数据库代理。仅包含只读节点的自定义集群地址 从任意只读节点获取。说明 集群版本需为...
POSIX客户端挂载文件系统（Alibaba Cloud Linux）
本文介绍如何为Alibaba Cloud Linux 2操作系统安装CPFS-POSIX客户端并挂载访问CPFS文件系统。背景信息 本文提及的目标ECS均指代挂载访问CPFS文件系统的计算节点。文件存储CPFS兼容POSIX接口，通过安装CPFS-POSIX客户端、挂载文件系统使用。...
OSS Foreign Table使用技巧
以下步骤以Linux系统为例，介绍如何切分大文件：获取当前大文件的行数。wc-l按照指定行数切分成多个小文件，N 表示切分后的小文件中的行数。split-l N说明 切分后的小文件需要保证行的完整性，即同一行记录只允许存在同一个文件内，不允许...
新建补数据计划
如果离线计算任务运行失败，可通过重新调度对应时间周期的任务，补充节点数据。任务中心支持在任务流、节点任务和离线计算任务中补数据。本文以在任务流和离线计算任务中补数据为例，介绍如何新建补数据计划。在任务流中新建补数据计划 ...
新建补数据计划
如果离线计算任务运行失败，可通过重新调度对应时间周期的任务，补充节点数据。任务中心支持在任务流、节点任务和离线计算任务中补数据。本文以在任务流和离线计算任务中补数据为例，介绍如何新建补数据计划。在任务流中新建补数据计划 ...
在EMR集群运行TPC-DS Benchmark
TPC-DS是大数据领域最为知名的Benchmark标准。阿里云E-MapReduce多次刷新TPC-DS官方最好成绩，并且是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群完整运行TPC-DS的99个SQL，并得到最佳的性能体验。背景信息 ...
Alibaba Cloud Linux 3系统的NFS文件系统读取文件性能...
在NFS（Network File System）文件系统中通过read、copy_file_range等系统调用读取文件时，与同场景下的Alibaba Cloud Linux 2相比，可能会存在明显的性能退化情况。本文介绍在Alibaba Cloud Linux 3系统的ECS实例中，在NFS文件系统下读取...
内核功能与接口概述
如果您对Linux的内核系统有一定的了解，并且需要使用Linux内核功能，可以通过本文了解Alibaba Cloud Linux已支持的内核功能与接口。内存 文档链接 支持版本 说明 Memcg Exstat功能 Alibaba Cloud Linux 2内核版本 4.19.91-18.al7 及以上 ...
赋值节点
当您需要将上游节点任务的查询或输出结果...测试获取的赋值节点结果集 下游节点引用赋值节点结果集后，您可将下游节点及赋值节点提交至开发环境，并进入 开发环境运维中心 执行补数据操作，测试下游节点获取的赋值节点结果集数据是否正确。
使用ping命令丢包或不通时的链路测试方法
确认异常节点后，访问 IP地址查询 等网站查询并获取相应节点归属的运营商及网络，解决方案如下：如果是客户端本地网络相关节点出现异常，则需要对本地网络进行相应排查分析。如果是运营商相关节点出现异常，则需要直接联系运营商，或联系...
其他问题
本文介绍NAS支持的挂载协议、支持的计算节点、如何修改NFS请求数量、确认挂载结果、强制卸载等常见问题。挂载 NAS是否支持外网/本地IP挂载？为什么Linux无法挂载SMB文件系统？本地电脑或非阿里云主机如何挂载访问阿里云NAS？阿里云无影云...
Linux下Tomcat+Java+MySQL接入实践
本章介绍如何在Linux 系统下使用Tomcate+Java+MySQL对托管应用进行部署 准备工作 安装Docker环境。您可以直接访问 Docker官网 获取更多信息。Linux客户端安装：目前在Linux系统上安装Docker，对系统版本有以下要求：CentOS：7 Debian：7.7...
Linux挂载NFS文件系统
前提条件 在创建NAS文件系统的节点，已有可用的ENS实例（Linux）。已创建NAS文件系统，并获取到文件系统的挂载点地址，且与ENS实例属于同一VPC。操作步骤 登录ENS实例。安装NFS客户端：在Linux系统挂载NFS文件系统时，需要先安装NFS客户端...
Linux系统挂载NFS协议文件系统
创建NAS NFS协议文件系统后，您需要使用云服务器来挂载该文件系统，以实现多个云服务器共享访问文件系统的目的。本文介绍如何通过阿里云Linux ECS实例挂载NAS NFS协议文件系统。前提条件 在创建文件系统的地域，已有可用的云服务器ECS...
操作手册
ii.OSS数据映射 OSS 数据映射（或者称 OSS 数据挂载），可以将 OSS 上的数据映射到计算节点的本地路径（windows 是盘符），一个作业中的所有计算节点可以共享访问到相同的数据。OSS 数据挂载有如下功能或限制：映射的目的路径必须根据计算...
- 产品推荐
- 这些文档可能帮助您