JSON函数和操作符
json_extract_path(from_json json,VARIADIC path_elems text[])→json jsonb_extract_path(from_json jsonb,VARIADIC path_elems text[])→jsonb json_extract_path('{"f2":{"f3":1},"f4":{"f5":99,"f6":"foo"}}','f4','f6')→"foo"将指定...
转义字符
返回结果 010 JSON+正则表达式+SQL转义 如果字符串本身就含有转义字符，例如 {"key":"this is very \"important\"."} 这段JSON，使用正则表达式匹配出其中的 important 步骤如下：写出正则表达式：\"(.*)\。对其中的反斜线进行正则表达式的...
日志服务
P<msg>.+)"logColumns:#name与正则匹配到的name一致或使用JSON的key-name:level description:日志等级#isLabel 为 true 时，作为label，可在logQL中的labelQuery被使用 isLabel:true-name:msg description:描述信息 isLabel:false 文件采集...
概述
使用原生插件时，须符合如下要求：第一个处理插件必须为正则解析插件、分隔符模式解析插件、JSON解析插件、NGINX模式解析插件、Apache模式解析插件或IIS模式解析插件。第一个处理插件之后仅允许存在1个时间解析处理插件，1个过滤插件和多个...
过滤日志
参数 类型 是否必选 说明 Include JSON Object 否 Key为日志字段，Value为该字段值匹配的正则表达式。键值对之间为与关系。如果日志字段的值符合对应的正则表达式，则采集该日志。Exclude JSON Object 否 Key为日志字段，Value为该字段值...
字段值提取函数
pack_json String 否 将正则表达式的所有匹配结果打包放入pack_json指定的字段中。默认值是None，表示不打包。返回结果 返回附带新字段值的日志。函数示例 示例1：提取字段中符合表达式的值。原始日志 msg:192.168.0.1 ...
接口出参
使用正则表达式提取JSON类型的Response时，无需在K/V间隔的冒号后面加空格（JSON格式化展现中加入空格是为了展现优化）。可查看 Response原文 信息，参考下图：Cookie:K/V和Header:K/V类型 Cookie:K/V和Header:K/V分别用于提取Cookie字段和...
接口出参
使用正则表达式提取JSON类型的Response时，无需在K/V间隔的冒号后面加空格（JSON格式化展现中加入空格是为了展现优化）。可查看 Response原文 信息，参考下图：Cookie:K/V和Header:K/V类型 Cookie:K/V和Header:K/V分别用于提取Cookie字段和...
Logtail
正则默认最大处理能力为20 MB/s（与正则表达式的复杂度有关）。分隔符日志最大处理能力为40 MB/s。JSON日志最大处理能力为30 MB/s。通过启动参数 process_thread_count 设置多个处理线程，可提升1.5~3倍性能。最大监控目录及文件数 与内存...
JSON类型
尤其是，jsonb 将拒绝位于本数据库 numeric 数据类型范围之外的数字，而 json 则不会。这类实现定义的限制是 RFC 7159 所允许的。不过，实际上这类问题更可能发生在其他实现中，因为把 JSON 的 number 基本类型表示为 IEEE 754 双精度浮点...
OSS上传回调时出现“The callback ...json format”报错
如果为 application/json，则会按照JSON格式替换其中的变量。关于OSS回调参数设置的更多信息，请参见 Callback。请参见以下方法进行调整：方法一：callbackBody参数应该设置成类似以下格式："callbackBody":"{\"bucket\":${bucket},\...
Canal
canal-json.database.include 选填(none)String 一个可选的正则表达式，通过正则匹配Canal记录中的database元字段，仅读取指定数据库的changelog记录。正则字符串与Java的 Pattern 兼容。canal-json.table.include 选填(none)String 一个可...
云函数支持固定出网IP
52:20 GMT","Content-Length":"194"},"body":{"access_token":"61_7kK2pb8ijdkz-*","expires_in":7200 },"statusCode":"OK","statusCodeValue":200 } 重要 body的格式需要根据Content-Type判断，如果是application/json，则body为JSON格式...
SPL概述
字段赋值表达式，直接对字段赋值例如 level='INFO'，或者将正则表达式的提取结果赋值给字段例如 msg=regex_extract(content,'\S+')。SQL表达式 数据计算表达式返回值，例如 cast(status as int)>=500。output 处理结果中的输出字段。例如|...
配置CLI
直接执行 aliyunlog configure-format-output=json，则表示对所有输出结果进行JSON格式化。转义字符 日志服务CLI返回结果中，非英文字符默认都是转义字符串。如果您需要返回原始字符（例如中文字符串），可以在-format-output 添加 no_...
表达式函数概览
正则表达式函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。regex_match 判断是否匹配正则表达式。regex_replace 根据正则表达式替换字符串中的指定字符。regex_split 将一个...
函数总览
正则表达式函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。regex_match 判断是否匹配正则表达式。regex_replace 根据正则表达式替换字符串中的指定字符。regex_split 将一个...
实现对象存储
如果看到 oss-test.json，则说明上传成功。否则，请检查本地代码，排查问题，然后再次执行OssApplication中的main函数，启动服务。在浏览器访问 http://127.0.0.1:18084/download 即可下载文件，会得到 oss-test.json 的文件内容。{"name":...
DataX同步数据
参数 描述 类型 本教程中需要上传的文件格式为JSON，则类型选择 others。系统支持选择的类型包括 file、jar、python 和 others，适用场景说明如下：上传的文件格式为XLS、DOC、TXT、CSV，则类型选择为 file。上传的文件格式为JAR，则类型...
DataX同步数据
参数 描述 类型 本教程中需要上传的文件格式为JSON，则类型选择 others。系统支持选择的类型包括 file、jar、python 和 others，适用场景说明如下：上传的文件格式为XLS、DOC、TXT、CSV，则类型选择为 file。上传的文件格式为JAR，则类型...
函数概览
正则式函数 函数名称 说明 支持SQL 支持SPL regexp_extract_all函数 提取目标字符串中符合正则表达式的子串，并返回所有子串的合集。提取目标字符串中符合正则表达式的子串，然后返回与目标捕获组匹配的子串合集。regexp_extract函数 提取...
调试场景
在 测试出参正则 对话框，选择来源格式，填写正则表达式，指定为第几个匹配项。单击 测试表达式。通过响应详情匹配结果，预判提取的内容是否符合预期。若需重新设置出参，则单击 同步出参配置，将此正则表达式同步到该API的出参列表中。...
Logtail配置
如果该值以^开头并且以$结尾，则为正则匹配，例如设置 EnvKey 为 NGINX_SERVICE_PORT，设置 EnvValue 为^(80|6379)$，表示可匹配服务端口为80、6379的容器。说明 多个白名单之间为或关系，即只要容器的环境变量满足任一白名单即可匹配。...
调试场景
在 测试出参正则 对话框，选择来源格式，填写正则表达式，指定为第几个匹配项。单击 测试表达式。通过响应详情匹配结果，预判提取的内容是否符合预期。若需重新设置出参，则单击 同步出参配置，将此正则表达式同步到该API的出参列表中。...
全局操作函数概览
字段值提取函数 e_regex 根据正则表达式提取字段的值并赋值给其他字段。e_json 对特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。e_kv 通过quote提取多个源字段中的键值对信息。e_kv_delimit 通过分隔符...
管理Kafka JSON Catalog
本文将从以下方面为您介绍如何管理Kafka JSON Catalog：创建Kafka JSON Catalog 查看Kafka JSON Catalog 使用Kafka JSON Catalog 删除Kafka JSON Catalog 使用限制 Kafka JSON Catalog仅支持消息格式为JSON的Topic，暂不支持其他格式。...
字符串替换
您在使用Logtail采集日志时，可以使用processor_string_replace插件，实现文本日志的全文替换、正则提取替换或去转义符。本文介绍processor_string_replace插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用...
数字人卡片使用指南
例如string类型的高级设置里有正则判断，具体格式的选择（日期、uri）。导入JSON 可以通过JSON或者JSON-SCHEMA的形式快速导入到数据协议里；定义好数据协议之后，就可以开始定义卡片样式了。卡片样式 重要 请勿修改package.json里的name...
SelectObject
317<SelectRequest><Expression>c2VsZWN0ICogZnJvbSBvc3NvYmplY3Qub2JqZWN0c1sqXSB3aGVyZSBwYXJ0eSA9ICdEZW1vY3JhdCc=</Expression><InputSerialization><JSON.../JSON></OutputSerialization><Options/></SelectRequest>SQL语句正则表达式...
ACS:ECS:RunInstances
{{ ACS:RegionId }} imageId 镜像ID String 是 字符串校验正则表达式:[A-Za-z0-9_-.]*最大长度:100 最小长度:1 instanceType 实例类型 String 是 字符串校验正则表达式:ecs.[A-Za-z0-9.-]*最大长度:30 最小长度:1 instanceName 实例名称 ...
SPL与SQL的使用场景对照
parse(Time,'%Y-%m-%d%H:%i')字段提取 正则提取 select cast(Status as BIGINT)as Status,date_parse(Time,'%Y-%m-%d%H:%i')AS Time JSON提取 select cast(Status as BIGINT)as Status,date_parse(Time,'%Y-%m-%d%H:%i')AS Time 正则提取：...
SPL指令
pattern Regexp 是 正则表达式，支持RE2正则语法。output Field 否 用于存储正则提取结果的字段名称。示例 示例1：探索式逐个进行匹配。SPL语句*|parse-regexp content,'(\S+)' as ip-生成字段ip:10.0.0.0。parse-regexp content,'\S+\s+(\...
导入场景
gt：大于 gte：大于等于 lt：小于 lte：小于等于 eq：等于 n_eq：不等于 ctn：包含 n_ctn：不包含 exist：存在 n_exist：不存在 belong：属于 n_belong：不属于 regex_match：正则匹配 point：检查对象。type：检查点类型：BODY_TEXT表示...
导入场景
有gt|gte|lt|lte|eq|n_eq|ctn|n_ctn|exist|n_exist|belong|n_belong|regex_match，分别表示：大于｜大于等于｜小于｜小于等于｜等于｜不等于｜包含｜不包含｜存在｜不存在｜属于｜不属于｜正则匹配。point：检查对象。type：检查点类型：...
URL收敛机制说明
添加收敛规则：您可以参考如下正则式，添加新的收敛规则，收敛阈值不会对添加的收敛规则生效，只要正则式匹配成功，就会触发收敛。service/(.*?demo 定向关闭基于统计的收敛：您也可以通过正则式定向关闭基于统计的收敛，例如不收敛/api/v1...
提取字段
您在使用Logtail采集日志时，可以添加Logtail插件，通过正则模式、标定模式、CSV模式、单字符分隔符模式、多字符分隔符模式、键值对模式、Grok模式提取日志字段。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和...
简介
本文介绍集成管理的相关内容。集成管理概述 多端低...若 入参 和 出参 的数据结构匹配JSON类型，则自动将入参和出参对应的JSON数据转换为Structure结构体，存入 结构体管理。同时为这些结构体自动命名，命名规则为：{接口名}-{请求/响应}。
Terraform类型模板结构
如果description是 Json 字符串，则要求其内容与ROS类型模板参数（Parameters）语法相同，限制如下：不能包含不支持的字段。如果NoEcho已定义，则不再使用sensitive；如果NoEcho未定义，则使用sensitive。如果Default已定义，则不再使用...
导出和导入安全组规则
JSON格式 JSON文件命名规则示例为：ecs_${region_id}_${groupID}.json 假设 regionID 是 cn-qingdao ，groupID 是 sg-123，导出的JSON文件名称则是 ecs_cn-qingdao_sg-123.json。CSV格式 CSV文件命名规则示例为：ecs_sgRule_${groupID}_${...
DescribeProtectionModuleRules
可选值：eq（精准匹配）、prefix-match（前缀匹配）、regex（正则匹配）。url：String类型|必选|路径关键字，必须以正斜杠（/）开头。keyType：String类型|必选|情报库类型，包含IP库（ip）、指纹库（ua）两种类型。RuleId：Integer类型|必...
- 产品推荐
- 这些文档可能帮助您