数据类型
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
JSON数据从MongoDB迁移至MaxCompute
本文为您介绍如何通过DataWorks的数据集成功能，将从MongoDB提取的JSON字段迁移至MaxCompute。前提条件 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 创建业务流程。在MongoDB上准备测试数据 ...
JSON数据从MongoDB迁移至MaxCompute
本文为您介绍如何通过DataWorks的数据集成功能，将从MongoDB提取的JSON字段迁移至MaxCompute。前提条件 开通MaxCompute和DataWorks。新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。在DataWorks上完成创建业务流程，本例使用...
数组和嵌套类型
嵌套类型字段在写入数据表时为字符串类型，对应到多元索引嵌套字段类型的格式为JSON对象的数组，例如[{"tagName":"tag1","score":0.8},{"tagName":"tag2","score":0.2}]。重要 即使只有一个子行，也必须按照JSON数组的格式构造字符串。单层...
为什么未创建索引的JSON子字段会产生索引流量？
当您为JSON类型的字段配置索引后，字段名和字段值都会被计入到索引流量中，包括未被配置索引的子节点。计算规则 JSON字段的索引流量计算规则如下：如果未对子节点设置索引，则其索引流量按照text类型进行计算。如果对子节点设置了索引，则...
JSON数据类型
resultC2k1等于JSON数组上index为2的JSON对象以k2为键的值，结果为3 当 json_extract 函数在WHERE子句中使用时，表示获取JSON列上具体的值并进行条件过滤。如果 json_extract 函数在WHERE子句中涉及数据比较和筛选时，不同数据类型之间比较...
JSON_VALID
检查字符串是否为合法的JSON格式。命令格式 boolean json_valid(<json>)参数说明 json：必填，待处理的JSON字符串。返回值说明 返回BOOLEAN类型的true或者false。使用示例 示例1：检查"abc"是否为合法的JSON格式字符串。select json_valid...
查询和分析JSON日志的常见问题
将某个字段设置为JSON类型后，如果对JSON对象中的某个叶子节点有进一步的分析需求，可以为叶子节点建立索引，这样可以加快叶子节点的查询和分析速度，但同时也会产生额外的索引费用。日志服务支持JSON对象中的叶子节点建立索引，但不支持...
ORDER BY子句
其中，content、time 和 request_time 为JSON日志中的字段。注意 在查询和分析JSON类型的日志时，需注意以下事项。更多信息，请参见 查询和分析JSON日志。必须给字段名称加上JSON中父路径前缀，例如 content.time.request_time。分析语句中...
如何在查询和分析语句中使用引号？
本文介绍引号在查询和分析语句中的使用。说明 在日志服务的查询和分析语句（查询...此处 content 字段的索引为JSON类型。更多信息，请参见 如何查询和分析有索引的JSON字段。SELECT"content.status",COUNT(*)AS PV GROUP BY"content.status
解析与更新JSON数据
本文介绍如何使用数据加工对包含JSON对象的日志进行解析与更新。场景一：展开和提取JSON对象 日志中包含JSON对象时，您可以通过 e_json 函数展开和提取对象。示例1：展开一层JSON 例如，展开 data 字段值中的第一层键值对。原始日志 data:{...
JSON_ARRAY
将一个可能为空的JSON类型对象，转换为包含这些类型的数组。命令格式 json json_array()参数说明 element：必填。该参数支持的类型包括STRING、BIGINT、BOOLEAN和JSON。返回值说明 返回JSON类型。使用示例-生成json array select json_...
JSON函数
函数名称 语法 说明 支持SQL 支持SPL json_array_contains函数 json_array_contains(x,value)判断JSON数组中是否包含某个值。json_array_get函数 json_array_get(x,index)获取JSON数组中某个下标对应的元素。json_array_length函数 json_...
半结构化分析
其中，JSON数据类型直接存储输入文本，会保存JSON数据中语义无关的空格，并且会保持JSON对象键的顺序，以及JSON数据中重复的键和键对应的数据。对于重复键在查询的时候会将最后一个遇到键的值当作有效值。JSONB数据类型则是以二进制格式来...
展开JSON字段
您可以使用processor_json插件展开JSON字段。本文介绍processor_json插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时...
创建和管理结构对象映射
系统支持创建结构对象和领域对象...映射字段被删除：结构对象字段映射中，结构对象-对象名称+对象编码 的字段 字段编码 被删除，请修改或重新保存该对象字段映射。单击 去编辑，页面将会跳转到字段映射关系编辑面板，修改完成后，单击 保存。
接入指南
}</style><body><div id="brush"/></body>初始化组件 户型图的主要数据从orthomap.json中提取，具体获取方式查看前端引擎SDK中初始化获取orthomap.json的逻辑【3、初始化应用】，主要数据储存在vectorMap字段中。假设已经获取到orthomap....
创建和管理领域对象映射
系统支持创建领域对象和数据对象的映射...映射字段被删除：对象字段映射中，领域对象-对象名称+对象编码 的字段 字段编码 被删除，请修改或重新保存该对象字段映射。单击 编辑，页面将会跳转到字段映射关系编辑面板，修改完成后，单击 保存。
0011-00000007
问题描述 文件元数据中Content-Disposition的值包含非法字符。...解决方案 请检查请求的表单域中Content-Disposition字段的值是否包含非法字符。关于如何设置Content-Disposition，请参见 管理文件元数据。相关文档 管理文件元数据 PostObject
0011-00000008
问题描述 文件元数据中Content-Encoding的值包含非法字符。...解决方案 请检查请求的表单域中Content-Encoding字段的值是否包含非法字符。关于如何设置Content-Encoding，请参见 管理文件元数据。相关文档 管理文件元数据 PostObject
0011-00000006
问题描述 文件元数据中Content-Type的值包含...解决方案 检查请求的表单域中Content-Type字段的值是否包含非法字符。关于如何通过Content-Tpye设置合法的文件类型，请参见 如何设置Content-Type（MIME）？相关文档 管理文件元数据 PostObject
查看及管理逻辑表下游对象
下游对象字段列表，请参见 查看逻辑表下游对象列表。下游对象列表支持的操作，请参见 下游对象列表支持的操作。查看逻辑表下游对象列表 创建逻辑表字段的下游对象后，将在下游对象列表为您展示。逻辑表下游对象列表展示当前逻辑表的对象...
查看及管理逻辑表下游对象
下游对象字段列表，请参见 查看逻辑表下游对象列表。下游对象列表支持的操作，请参见 下游对象列表支持的操作。查看逻辑表下游对象列表 创建逻辑表字段的下游对象后，将在下游对象列表为您展示。逻辑表下游对象列表展示当前逻辑表的对象...
特定结构化数据函数
json_parse 将值解析为JSON对象。XML xml_to_json 将xml数据转成JSON数据。json_select 根据JMES语法提取或计算JSON表达式中特定的值。函数格式 json_select(value,jmes,default=None,restrict=False)参数说明 参数 类型 是否必填 说明 ...
提取字段
您在使用Logtail采集日志时，可以添加Logtail插件，通过正则模式、标定模式、CSV模式、单字符分隔符模式、多字符分隔符模式、键值对模式、Grok模式提取日志字段。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和...
过滤日志
参数 类型 是否必选 说明 Include JSON Object 否 Key为日志字段，Value为该字段值匹配的正则表达式。键值对之间为与关系。如果日志字段的值符合对应的正则表达式，则采集该日志。Exclude JSON Object 否 Key为日志字段，Value为该字段值...
自定义开发组件蓝图说明
在当前 publicHandler 字段中自定义设置 显示 和 隐藏 的描述，但是需要与 index.js 文件中的方法名保持一致。说明 动作逻辑都可自定义多个，自定义设置越多，蓝图编辑器节点页面显示动作越多。打开 index.js 文件，设置代码中的 container...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
修改地图区域样式
可视化应用创建完成后，您可以通过本文的操作步骤，将可视化应用的地图组件修改为您所需的区域地图的样式。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。背景信息 可视化应用模板提供的地图区域为浙江省区域的地图，如果...
修改地图区域样式
可视化应用创建完成后，您可以通过本文的操作步骤，将可视化应用的地图组件修改为您所需的区域地图的样式。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。背景信息 可视化应用模板提供的地图区域为浙江省区域的地图，如果...
0006-00000208
问题描述 PostObject请求中Policy缺少必须的expiration字段。问题原因 您发起了PostObject请求来上传文件，请求中的Post Policy缺少必选的expiration字段，导致请求报错。问题示例 Post Policy的JSON文本缺少必选的expiration字段。{...
如何使用蓝图编辑器自定义开发组件
本文档示例为开发者的自定义组件提供功能开发的参考，主要介绍三个蓝图编辑器内容的实现方法：事件触发、导入数据接口、添加交互动作。前提条件 本文需要操作使用桌面版开发工具，详情请参见开发工具使用说明中的 桌面版开发工具使用说明。...
0006-00000207
问题描述 PostObject请求中Policy缺少必选的conditions字段。问题原因 您发起了PostObject请求来上传文件，请求中的Post Policy缺少必选的condtions字段，导致请求报错。问题示例 Post Policy的JSON文本缺少必选的conditions字段。{...
使用ROS模板选择和设置对象
资源编排支持通过新增对象数组、元素数组和参数对象对JSON数据进行扩展，增强JSON对象的校验逻辑。对象数组 对象数组为单一对象，数组元素支持所有的ROS模板参数类型。模板示例 ROSTemplateFormatVersion:'2015-09-01' Parameters:...
配置Kafka输入
数组所在位置路径 当输出模式设置为多行输出时，指定JSON数组在kafka记录value中的路径，路径支持以 a.a1 的格式引用特定JSON对象中的字段或者以 a[0].a1 的格式引用特定JSON数组中的字段，如果该配置项为空，则将整个kafka记录value作为...
数据加工
复制字段 针对已有字段，复制一个 字段表达式 和 字段类型 相同的字段，方便您快速创建同类型字段，提高数据准备的效率。删除字段 针对多余字段，完成数据的清洗加工。查看数据详情。支持查看 数据探查、数据详情 和 字段列表。聚合 根据...
22.8版本新特性概览
支持JSON类型和动态子列 老版本的JSON格式数据读写方式 在22.8之前的版本中，ClickHouse支持以String类型来存储JSON对象，因为JSON对象是文本格式，需要通过特殊的String解析函数来解析复杂的JSON结构，从而获得JSON对象内部字段信息。...
控制台错误日志说明
校验场景 主键类型为文本类型，字段值为null or empty 7503 JSON插件字段内容不是JSON格式，推送失败，请检查后重试。JSON插件 字段值不是JSON格式 7504 JSON插件字段内容对应key不存在，补充默认值。JSON插件 字段值JSON内容中不包含JSON...
PutUserDefinedLogFieldsConfig
user_defined_log_fields 字段的值是一个JSON文本Base64编码后的值，这个JSON文本默认有一个字段为“truncated”用于表示是否有截断发生，另外有两个字段“headers”和“querys”分别对应用户配置的请求头和查询参数信息。自定义请求头个数...
- 产品推荐
- 这些文档可能帮助您