什么是消息解析
数据解析流程图：设备上报自定义Topic的数据（上行数据）全流程图：自定义Topic消息解析脚本编写方法，请参见：提交消息解析脚本 JavaScript脚本示例 Python脚本示例 PHP脚本示例 物模型消息解析 数据格式 为 透传/自定义 的产品下的设备与...
设备使用物模型通信
物联网平台提供物模型功能定义能力，设备可通过物模型通信Topic按照Alink JSON数据格式，实现与物联网平台交互通信。本文介绍设备与物联网平台之间，如何通过物模型实现多场景消息通信。背景信息 物联网平台提供的物模型功能定义和使用说明...
使用Topic通信
自定义Topic 如果设备的消息格式不是 Alink JSON，必须使用 消息解析 将设备上报的自定义Topic数据解析为 Alink JSON 格式，通过自定义Topic下发设备的数据格式没有限制。消息解析的概念和使用步骤，请参见 什么是消息解析。物模型Topic ...
创建产品
若产品的 数据格式 为 透传/自定义，该产品下设备与物联网平台进行物模型数据通信时，物联网平台会先调用数据解析脚本，将上报的透传或自定义格式数据转换为Alink JSON格式，然后进行数据校验。弱校验：仅校验设备上报数据中的identifier和...
半结构化分析
JSON/JSONB AnalyticDB PostgreSQL版 支持JSON数据格式。JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供...
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
SQL表达式
CurrentTemperature.value">38 SELECT JSON数据格式 SELECT语句中的字段，可以使用上报消息的payload解析结果，即JSON中的键值，也可以使用SQL内置的函数，如 deviceName()。规则引擎内置的SQL函数，请参见 函数列表。支持*和函数的组合。...
脚本和输出语法
数据服务中数据解析的数据源：物联网平台是基于数据解析后的JSON数据格式来处理和传递数据的。数据格式示例为：{"payload":{"key1":"value1","key2":"value2"},"ts":1623516625000 } payload：固定系统字段，其下字段（例如：key1、key2）...
提交物模型消息解析脚本
背景信息 数据格式为 ICA标准数据格式，设备按照物联网平台定义的标准数据格式生成消息上报，标准Alink JSON数据格式说明，请参见 设备属性、事件、服务。数据格式为 透传/自定义，设备通信时，需要物联网平台调用您提交的消息解析脚本，将...
JSON与XML解析库
请求参数 参数 必选 类型 说明 property_value 是 string JSON 格式数据 property_type 是 int 解析类型，0 表示 JSON，1 表示 XML 返回值 参数 必选 类型 说明 result 是 uint 处理 JSON 数据解析的标识符 property_destroy 删除 JSON 与 ...
物模型数据解析使用示例
本文以解析上、下行属性数据的脚本为例，介绍为数据格式为透传/自定义的产品下的物模型数据解析脚本编写方法。步骤一：编辑脚本 在 生活物联网平台，创建产品。创建产品操作指导，请参见 创建产品。说明 数据格式 选择为 透传/自定义。为该...
22.8版本新特性概览
同时使用起来也比较麻烦，如果JSON数据存在多层嵌套，那么查询JSON数据就需要一层层去进行解析和类型转换，才能被业务使用。示例如下：CREATE TABLE games(data String)ENGINE=MergeTree ORDER BY tuple();SELECT JSONExtractString(data,'...
如何对JSON类型进行高效分析
PolarDB IMCI也全面支持JSON数据类型及其列式函数，采用二进制JSON格式来存储半结构化数据，支持通过列式JSON函数来实现JSON文档的解析、查询、修改和删除等操作，与MySQL语法完全兼容。PolarDB IMCI采用精简二进制方式存储JSON列存数据，...
解析JSON格式日志
问题现象 ACS底层组件记录的标准输出日志与原生K8s日志格式一致，在每行标准输出日志前会增加时间戳、来源等信息，这可能会破坏您原生的日志格式，导致系统无法正常解析JSON格式日志。示例如下：2020-04-02T15:40:05.440500764+08:00 ...
解析JSON格式日志
问题现象 ECI底层组件记录的标准输出日志与原生K8s日志格式一致，在每行标准输出日志前会增加时间戳、来源等信息，这可能会破坏您原生的日志格式，导致系统无法正常解析JSON格式日志。示例如下：2020-04-02T15:40:05.440500764+08:00 ...
解析JSON格式日志
ECI的标准输出日志为原生K8s日志，每行日志前会增加时间戳、来源等信息，这会导致系统无法正常解析JSON格式日志。本文介绍如何通过阿里云日志服务SLS的Processor能力解决ECI日志的JSON格式解析问题。问题现象 ECI底层组件记录的标准输出...
解析JSON格式日志
ECI的标准输出日志为原生K8s日志，每行日志前会增加时间戳、来源等信息，这会导致系统无法正常解析JSON格式日志。本文介绍如何通过阿里云日志服务SLS的Processor能力解决ECI日志的JSON格式解析问题。问题现象 ECI底层组件记录的标准输出...
解析JSON格式日志
ECI的标准输出日志为原生K8s日志，每行日志前会增加时间戳、来源等信息，这会导致系统无法正常解析JSON格式日志。本文介绍如何通过阿里云日志服务SLS的Processor能力解决ECI日志的JSON格式解析问题。问题现象 ECI底层组件记录的标准输出...
调试实时任务
说明 Kafka中支持json、csv、canal-json、maxwell-json、debezium-json数据格式的自动抽样。Kafka自动抽样仅支持 无认证 和 用户名+密码认证 方式，不支持SSL。Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有...
配置数据计算和数据过滤
由于上报的JSON数据格式，可以是数组或者嵌套的JSON，因此，表达式中支持使用JSONPath获取其中的属性值。例如：{a:{key1:v1,key2:v2}} 可通过 a.key2 获取到值 v2。有关JSONPath的更多信息，请参见 LanguageManual UDF。表达式中使用变量时...
调试实时任务
说明 Kafka中支持json、csv、canal-json、maxwell-json、debezium-json数据格式的自动抽样。Kafka自动抽样仅支持 无认证 和 用户名+密码认证 方式，不支持SSL。Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有...
Logtail发布历史
优化 processor_json插件支持解析JSON array格式数据。containerd容器采集支持自定义rootfs路径和自动发现路径。优化容器元信息预览功能的上报逻辑。修复 修复stdout文件路径为软链接时无法采集容器stdout的问题。修复当只有容器删除事件时...
各地域功能说明
华东2（上海）数据转发的目的云产品 数据格式 JSON 二进制 消息服务（MNS）支持 支持 消息队列RocketMQ 支持 支持 函数计算（Function Compute）支持 支持 表格存储（Tablestore）支持 不支持 时序数据库（TSDB）支持 不支持 云数据库RDS版...
JSON索引（2.0版）
示例 以下SQL示例包含多种JSON数据格式，供您参考使用。insert into json_tbl(id,sid,json_test)values(0,0,'{"id":0,"name":"abc","age":0}');insert into json_tbl(id,sid,json_test)values(1,1,'{"id":1,"name":"abc","age":10,"gender...
安全隧道通信协议
通信数据格式说明 隧道帧包括以下两部分：Tunnel Header：定义安全隧道会话（Session）类型。字段 说明 Header Length Tunnel Header内容的字节数组长度，最大值为2048个字节。字节数组长度必须占位2个字节，高位字节在前，低位字节在后。...
脚本语法
脚本解析器的能力包括获取消息内容、转换数据格式、处理字符串、组装JSON格式数据、处理二进制数据和流转数据等。本文介绍如何编写解析脚本。背景信息 物联网平台是基于Topic中的数据格式来处理和传递数据的，数据格式的具体内容，请参见 ...
结果字段说明
JSON数据格式。project_name 模型训练任务数据源所在的Project。logstore_name 模型训练任务数据源所在的Logstore。result 结果内容。JSON数据格式。event_msg 模型训练任务在该时间点的进度信息。occ_time 模型训练任务进度对应的时间戳。...
配置产品和设备
设备通过DTU接入物联网平台前，您需要在物联网平台上依次完成以下操作：创建数据格式为透传/自定义的产品、创建设备、获取设备证书信息、定义物模型、编辑并提交数据解析脚本。创建产品和设备 在物联网平台创建产品和设备，获取设备证书...
表达式函数概览
jwt_encoding 基于JSON Web Token（JWT）标准，对JSON数据进行编码。jwt_decoding 基于JSON Web Token（JWT）标准，将数据解码为原始JSON。hashids_encoding 使用Hashids库对数据进行编码。hashids_decoding 对已使用Hashids库编码的数据...
设备影子概览
JSON数据格式的详细说明，请参见 设备影子JSON详解。每个设备有且只有一个设备影子，设备可以通过MQTT获取和设置设备影子来同步状态，该同步可以是影子同步给设备，也可以是设备同步给影子。与设置设备期望属性值区别 设备影子与设置设备...
编码解码函数
JSON Web Tokens（JWT）标准 jwt_encoding 基于JSON Web Token（JWT）标准，对JSON数据进行编码。jwt_decoding 基于JSON Web Token（JWT）标准，将数据解码为原始JSON。Hashids库 hashids_encoding 使用Hashids库对数据进行编码。hashids_...
接口
支持的JSON的数据格式有：对象（Object）：{} 数组（Array）：[]字符串（string）："test"数字（number）：123 布尔值（bool）：true、false 业务逻辑开发：调用在当前项目中，通过业务逻辑开发工作台开发的服务接口，将返回数据作为组件...
Routine Load
本文介绍如何通过Routine Load导入数据至 云数据库 SelectDB 版 实例。...{"key1":"value1","key2":"value2","key3":"value3"} 当使用动态或多表导入Routine Load（即不指定具体的表名）时，JSON数据格式如下。table_name|{...
函数总览
jwt_encoding 基于JSON Web Token（JWT）标准，对JSON数据进行编码。jwt_decoding 基于JSON Web Token（JWT）标准，将数据解码为原始JSON。hashids_encoding 使用Hashids库对数据进行编码。hashids_decoding 对已使用Hashids库编码的数据...
概述
输出文件 使用规定的JSON数据格式，将数据源或通过脚本处理后的数据，映射到指定孪生节点的物模型属性上。文件大小不超过256 KB。脚本和输出文件编辑方法，请参见 脚本和输出语法。应用场景 数据映射使用场景如下：数据源为物模型属性Topic...
函数列表
fields：要存储的数据记录，为Map或JSON类型数据。格式如下：{"key1":value1,"key2":value2 } key1、key2 为待存储的字段标识符，作为存储数据的名称。value1、value2 为赋值给字段的设备数据，作为存储数据的具体值。重要 fields 中最多...
支持的文件格式
JSON EsriJsonSerDe DLA支持Esri ArcGIS的地理JSON数据文件的SerDe处理，关于这种地理JSON数据格式说明，可以参考：https://github.com/Esri/spatial-framework-for-hadoop/wiki/JSON-FormatsCREATE EXTERNAL TABLE IF NOT EXISTS ...
脚本语法
时序数据存储规则的能力包括获取消息内容、转换数据格式、处理字符串、组装JSON格式数据、处理二进制数据等。本文介绍如何编写时序数据存储规则的脚本。背景信息 配置自定义Topic数据存储时，需添加对应的时序数据存储规则来编辑脚本，将...
PHP脚本示例
说明 本模板仅适用于 数据格式 为 透传/自定义 的产品。php /*将Alink协议的数据转换为设备能识别的格式数据，物联网平台给设备下发数据时调用*入参：$jsonObj 关联数组*出参：$rawData 普通数组，数组元素为整数，取值范围为0~255，不能...
LoRaWAN设备消息解析
LoRaWAN设备与物联网平台的通信数据格式为透传/自定义，因此需要使用消息解析脚本，解析上下行数据。本文以LoRaWAN温湿度传感器为例，介绍LoRaWAN设备消息解析脚本的编辑和调试方法。步骤一：编辑脚本 在 物联网平台控制台，创建连网方式为...
- 产品推荐
- 这些文档可能帮助您