SLICE
对ARRAY数组切片，截取从 start 位置开始长度为 length 的元素组成新的ARRAY数组。命令格式 array<T>slice(array<T><a>,,)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。start：必...
Array数组类型
8,9]]{{1,2,3},{4,5,6},{7,8,9}}|元素与数组连接 3|ARRAY[4,5,6]{3,4,5,6}|数组与元素连接 ARRAY[4,5,6]|7 {4,5,6,7} 使用索引加速数组检索 当数组中包含非常多元素，需要使用@>操作符检索是否包含某个元素时，数组元素越多，检索性能也越...
PHP脚本示例
}/*将设备的自定义格式数据转换为Alink协议的数据，设备上报数据到物联网平台时调用*入参：$rawData 普通数组，数组元素为整数*出参：$jsonObj 关联数组，关联数组key取值为英文字符串，不能是字符类型的数字如"10",不能为空*/function ...
配置API输入组件
读取JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。请求次数 支持 一次请求 和 多次请求。一次请求：只进行一次请求。多次请求：根据指定循环的参数，进行多次请求。请求参数：需要在Parameters或Body中配置，...
配置API输入组件
读取JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。请求次数 支持 一次请求 和 多次请求。一次请求：只进行一次请求。多次请求：根据指定循环的参数，进行多次请求。请求参数：需要在Parameters或Body中配置，...
透明接入
资源组 从资源组列表中选择该域名所属资源组。说明 您可以使用资源管理服务创建资源组，根据业务部门、项目等维度对云资源进行分组管理。更多信息，请参见 创建资源组。在 检查并确认 模块，检查已配置的透明接入信息，并单击 下一步。在 ...
NodeGroupConfig
数组元数个数 N 的取值范围：1~20。string 虚拟机交换机 ID。WithPublicIp boolean 是否开公网 IP。取值范围：true：开公网。false：不开公网。默认值：false。false AdditionalSecurityGroupIds array 附加安全组。除集群设置的安全组外，...
Tablestore数据源
使用限制 Tablestore Reader和Writer插件实现了从Tablestore读取和写入数据，包含 行模式、列模式 两种数据读取与写入方式，可针对宽表与时序表进行数据读取与写入。列模式：在Tablestore多版本模型下，表中的数据组织为 行>列>版本 三级的...
采集数据
user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步，完成数仓数据...
采集数据
user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步，完成数仓数据...
配置Kafka输入
数组所在位置路径 当输出模式设置为多行输出时，指定JSON数组在kafka记录value中的路径，路径支持以 a.a1 的格式引用特定JSON对象中的字段或者以 a[0].a1 的格式引用特定JSON数组中的字段，如果该配置项为空，则将整个kafka记录value作为...
数组函数和运算符
本文介绍数组函数和运算符的基础语法及示例。日志服务支持如下数组函数和运算符。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符...
配置并管理实时同步任务
目标端写入并发数 数据同步任务内，可以从来源表并行读取或写入数据至目标端的最大线程数。最大并发数为32。请根据您的资源组大小和目标端实际规模合理设置。单击 完成配置。提交并发布实时同步任务 提交并发布节点任务。单击工具栏中的 ...
DeleteIp-删除防护IP
将被防护IP从防护包中移除，取消防护。接口说明 被移除的 IP 将不再受到原生防护企业版实例的防护。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
PAI-TF数据转换方法
trans_csv_id2sparse(records,max_id,id_as_value=True,field_delim=”,”)输入以下参数：参数 是否必选 描述 records 是 类型STRING数组待解析CSV字符串数组（列表），以CSV格式由分隔符分隔。max_id 是 类型INT64稀疏矩阵的最大列数，...
关联数组
以下示例从emp表中读取前十名员工的姓名，将它们存储在一个数组中，然后显示数组中的结果。DECLARE TYPE emp_arr_typ IS TABLE OF VARCHAR2(10)INDEX BY BINARY_INTEGER;emp_arr emp_arr_typ;CURSOR emp_cur IS SELECT ename FROM emp ...
MongoDB数据源
数据集成本身不支持数组类型，但MongoDB支持数组类型，并且数组类型具有强大的索引功能。您可以通过参数的特殊配置，将字符串转换为MongoDB中的数组。转换类型后，即可并行写入MongoDB。自建MongonDB数据库不支持公网访问，仅支持阿里云...
参数映射与校验规则
如果参数类型设置为 ARRAY 数组类型，只有 query,formData,header 三个位置的参数支持数组格式，数组参数的校验规则对可以对每个数组元素生效，类型由数组参数类型字段指定，默认为字符串 4.3.后端参数映射规则 用户可以设置参数的 后端...
插件配置概述
被分解的字段可以是字符串或字符串数组。Split filter plugin logstash-filter-syslog_pri 解析Syslog（RFC3164）消息前部的PRI字段。如果没有设置优先级，它会默认为13（每个请求注解）。Syslog_pri filter plugin logstash-filter-...
开发和调试
避免读取用不到的字段：MaxCompute Graph框架的TableInfo类支持读取指定的列（以列名数组方式传入），而非整个表或表分区，这样也可以减少输入的数据量，提高作业性能。内置Jar包 以下Jar包会默认加载到运行Graph程序的JVM中，您不必上传...
消费组监控与告警
您可以通过日志服务控制台查看日志消费的状态并设置告警...消费组监控 仪表盘用于展示消费组相关信息，包括消费组个数、消费Logstore个数、消费Shard个数、消费组延迟数、消费组数据占比、消费组列表、消费组延时Top 10、消费落后时长等图表。
自定义防护规则组
在 应用到网站 页面，从 待接入网站 列表选择要应用当前防护规则组的网站域名，添加到 已接入网站 列表，并单击 保存。重要 每个网站域名仅支持应用一个防护规则组，且必须应用一个防护规则组。完成操作后，您可以在规则组列表的 应用网站 ...
Elasticsearch数据源
子属性 场景三：数组属性拆分为多行 数组归并，一个字符串数组内容，归并为一个属性，并进行去重。属性[]场景四：数组属性去重归并 多属性合一，将多个属性合并为一个属性。属性1,属性2 场景五：多属性合一同步 多属性选择处理。属性1|属性...
读取数据
表格存储 提供了GetRow接口用于读取单行数据以及BatchGetRow、GetRange等接口用于读取多行数据。说明 组成表的基本单位为行，行由主键和属性列组成。其中主键是必须的，且每一行的主键列的名称和类型相同；属性不是必须的，且每一行的属性...
使用paiio读写MaxCompute表数据
返回值 返回一个numpy ndarray数组（或称为recarray），数组中每个元素为表的一行数据组成的一个TUPLE。定位到相应行 接口定义 reader.seek(offset=0)参数 offset 表示定位到的行（行从0开始编号），下一个Read操作将从定位的行开始。如果...
排序和翻页
数组类型、嵌套类型等多值字段可以使用此方式通过指定mode参数来控制参与排序的元素。GeoDistanceSort（地理位置排序）根据地理点距离进行排序，适用于地图、物流等按照距离排序事物的场景，例如某个位置周边餐厅按距离排序等。翻页 查询时...
HBase数据源
配置格式如下所示："range":{"startRowkey":"aaa","endRowkey":"ccc","isBinaryRowkey":false } 否 无 scanCacheSize HBase Reader每次从HBase中读取的行数。否 256 scanBatchSize HBase Reader每次从HBase中读取的列数。否 100 HBase ...
离线同步常见问题
写入MaxCompute(ODPS）报错block失败：Error writing request body to server RestAPI Writer报错：通过path:[]找到的JSON串格式不是数组类型 离线同步源端是亚马逊的RDS时报错：Host is blocked 读取MongoDB报错：no master 读取MongoDB报...
查询Profile
查看查询Profile 查询执行完成后，通过如下命令获取Profile列表。这个命令会列出当前保存的所有Profile，每行对应一个查询。您可以选择需要查看的Profile对应的QueryId，查看Profile具体情况。SHOW QUERY PROFILE"/"\G*1.row*QueryId:c257c...
读取数据
表格存储 提供了GetRow接口用于读取单行数据以及BatchGetRow、GetRange等接口用于读取多行数据。如果需要了解表格存储各场景的应用案例，请参见 快速玩转Tablestore入门与实战。查询方式 表格存储 提供的数据读取接口包括GetRow、...
通用参考
示例 读取数组最后一个元素，如果数组为空，默认值为0。SPL语句*|extend values=json_parse(values)|extend values=cast(values as ARRAY(BIGINT))|extend last=COALESCE(values[3],values[2],values[1],0)输入数据#条目1 values:'[1,2,3]'...
多元索引
如果设置为true，则表示该列是一个数组，在写入时，必须按照JSON数组格式写入，例如["a","b","c"]。由于Nested类型是一个数组，当FieldType为Nested类型时，无需设置此参数。Index（可选）：是否开启索引，类型为Boolean。默认为true，表示...
PolarDB技术内幕
另外，分布式存储的网络延迟较大，在高负载下，网络中的Inflight IO会较多，IO组中的IO请求数量也会很多，而这种组织方式下，IO数组中的槽位状态都无序的，向数组中添加IO请求和移除IO请求的开销都很大。所以，PolarDB 在高负载下的性能...
通过DataWorks实现邮件外发最佳实践
DataWorks暂不支持自定义发送邮件功能，您可以通过PyODPS节点结合独享资源组的方式，实现从MaxCompute读取数据进行邮件外发的场景需求。说明 TCP 25端口是默认的邮箱服务端口。出于安全考虑，云服务器ECS的25端口默认受限，独享资源组无法...
SELECT
ARRAY JOIN子句 ARRAY JOIN子句作用是与数组类型或Nested数据类型的字段进行Join。它与arrayJoin函数作用相似，但它的功能更广泛。ARRAY JOIN本质上等同于INNER JOIN数组。示例：创建测试表arrays_test并插入数据：CREATE TABLE arrays_...
PAI-TF数据IO方式介绍
argument('-checkpointDir',type=str,default='',help='output model path')FLAGS,_=parser.parse_known_args()tf.app.run(main=main)其中：dirname：OSS文件路径，可以是数组。reader：TensorFlow内置各种类型reader API，可以根据需求...
ListGroups-查询用户组列表
返回结果显示，该目录下一共存在 3 个用户组，其中 group1 和 group2 是从外部同步的用户组，TestGroup 是云 SSO 内部手动创建的用户组。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...
使用数据传输同步数据
参数 描述 读取并发配置 该参数用于配置全量同步阶段从源端读取数据的并发数，最大限制为 512.并发数过高可能会造成源端压力过大，影响业务。写入并发配置 该参数用于配置全量同步阶段往目标端写入数据的并发数，最大限制为 512。并发数过...
COPY
带一个文件名的 COPY 指示 PolarDB服务器直接从一个文件读取或者写入到一个文件。该文件必须是 PolarDB用户（运行服务器的用户 ID）可访问的并且应该以服务器的视角来指定其名称。当指定了 PROGRAM 时，服务器执行给定的命令并且从该程序的...
将表格存储数据表中数据同步到另一个数据表
配置Tablestore Reader Tablestore Reader插件实现了从Tablestore读取数据，通过您指定的抽取数据范围，可以方便地实现数据增量抽取的需求。具体操作，请参见 附录：Reader脚本Demo与参数说明。配置Tablestore Writer Tablestore Writer...
- 产品推荐
- 这些文档可能帮助您