JSON
{"ItemId":4352,"OrderDate":"12/12/2017"}]} } 为了便于您查看JSON数据，使用在线JSON格式化工具处理后，数据内容为：{"DocId":"Alibaba","User_1":{"Id":1234,"Username":"bob1234","Name":"Bob","ShippingAddress":{"Address1":"969 ...
日志采集Agent对比
支持delimiter、key-value、json等主流格式 支持delimiter、key-value、json等主流格式 支持delimiter、key-value、json等主流格式 数据发送压缩 插件支持 插件支持 LZ4 数据过滤 支持 支持 支持 数据buffer发送 插件支持 插件支持 支持 ...
使用Go语言开发网关插件
开发网关插件可以扩展API网关的核心功能，使其能够满足更加复杂和特定的业务需求。本文介绍如何使用Go语言开发网关插件，并提供了本地开发和调试的指引。准备工作 安装Golang、TinyGo和Binaryen三个程序。Golang 官方 指引链接（需为1.18...
功能发布记录
插件中心支持创建多个插件实例，每个插件实例具备独立的插件配置和生效范围设定。Envoy过滤器模板支持绑定到指定的服务网格版本范围，而不再局限于单一服务网格版本。全部 v1.18及以上 全部 ASMGrpcJsonTranscoder CRD说明 使用插件市场...
典型场景
多模数据分析 面对多种非结构化数据源的挑战，云原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势：支持PostGIS插件扩展，实现地理数据分析处理。通过MADlib插件扩展，内置多种机器学习算法，实现AI Native DB。支持通过向量检索，...
功能特性
使用PTS Chrome插件录制场景 Charles录制压测场景 Charles是常用的网络封包截取工具，您可以使用Charles配置录制信息，完成云端录制。使用Charles录制压测场景 JMeter录制压测脚本 JMeter是Apache的开源压测工具，支持参数化、断言等功能。...
接口出参
使用正则表达式提取JSON类型的Response时，无需在K/V间隔的冒号后面加空格（JSON格式化展现中加入空格是为了展现优化）。可查看 Response原文 信息，参考下图：Cookie:K/V和Header:K/V类型 Cookie:K/V和Header:K/V分别用于提取Cookie字段和...
接口出参
使用正则表达式提取JSON类型的Response时，无需在K/V间隔的冒号后面加空格（JSON格式化展现中加入空格是为了展现优化）。可查看 Response原文 信息，参考下图：Cookie:K/V和Header:K/V类型 Cookie:K/V和Header:K/V分别用于提取Cookie字段和...
配置Kafka输入
Kafka插件基于Kafka SDK实时读取Kafka数据。背景信息 说明 支持阿里云Kafka，以及>=0.10.2且的自建Kafka版本。对于版本Kafka，由于Kafka不支持检索分区数据offset，且Kafka数据结构可能不支持时间戳，因此会引发同步任务延时统计错乱，造成...
使用Kafka协议上传日志
您可以使用Kafka Producer SDK、Beats系列软件、Collectd、Fluentd、Logstash、Telegraf、Vector等采集工具采集日志，并通过Kafka协议上传到日志服务。本文介绍通过采集工具采集到日志后，利用Kafka协议上传日志到日志服务的操作步骤。相关...
插件配置概述
阿里云Logstash支持100余款系统默认插件，包含开源和自研Logstash插件，能够提升集群在数据传输和处理、日志调试等各方面的能力。本文介绍阿里云Logstash支持的系统默认插件。阿里云Logstash仅支持系统默认插件，不支持自定义插件。系统...
2023年
NEW_WRAPPED_KEYSET 2023-10-20 新增KEYSET_TO_JSON 新说明 将BINARY类型的密钥Keyset转化为可读的JSON格式，以便查看密钥Keyset详情。KEYSET_TO_JSON 2023-10-20 新增ADD_KEY_TO_KEYSET 新说明 在Keyset中新增密钥，并将新增的密钥设置为...
命令行工具
本文介绍初始化及构建命令行工具的步骤。初始化 当工程脚手架初始化完后，如果需要新增页面，除了单纯的复制粘贴以外，提供了以下命令来添加页面定义和组件定义：init-page init-component init-page 命令格式 kylin init-page注意 上述...
什么是实时数仓Hologres
半结构数据分析 原生支持半结构化JSON数据类型，支持JSONB列式存储压缩，支持丰富的JSON相关表达算子，使JSON数据存储和分析效率接近原生列存效率。原生实时数仓 针对实时数仓数据更新频繁、数据模型简单和分析场景敏捷的特性，Hologres...
预置Processor使用说明
Processor名称 Processor Code（仅用于EASCMD部署）文档 CPU版 GPU版 PMML pmml 无 PMML Processor TensorFlow1.12 tensorflow_cpu_1.12 tensorflow_gpu_1.12 TensorFlow1.12 Processor TensorFlow1.14 tensorflow_cpu_1.14 tensorflow_gpu...
2021年
2021-03-16 华北2（北京）华东2（上海）华北3（张家口）华东1（杭州）华南1（深圳）西南1（成都）作业超时监控告警 MaxCompute 外部表支持SNAPPY、LZO压缩格式 如果您的数据格式为TEXTFILE，例如JSON，存放在OSS，希望通过外部表读写且支持...
自动化回归Spring Cloud服务的测试用例
在该测试步骤的 基本信息 区域，ContentType 选中 raw，在 JSON格式化 中输入引用变量名${XXX}。说明 XXX 为前序步骤的 出参提取 中设置的 出参名，用${ } 格式引用。单击右上方的 保存配置，然后单击 立即执行。创建包含子用例的多步骤...
Nodejs SDK使用示例
编辑完成后建议使用格式化工具监测JSON格式是否合法。上传链码 将文件 node-sdk-demo/chaincode/marbles_v4.cc 上传至BaaS并实例化，上传方法可以参考 部署链码 章节。运行示例程序 执行如下命令安装 marbles 依赖和启动 marbles 应用：npm...
2020年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2020年12...
新功能发布记录
湖仓版（3.0）OSS分区外表支持CSV、JSON、Parquet、ORC、AVRO等各种格式及分区映射的能力，满足数据保存在OSS中且分区特别多（超过10万）的场景。新增了OTS Connector，方便导入分析OTS的数据。通过外表导入至湖仓版 MongoDB数据导入 通过...
LogStash插件
Logstash插件 Logstash采集工具 Logstash是一种分布式日志收集框架，非常简洁强大，经常与ElasticSearch，Kibana配置，组成著名的ELK技术栈，非常适合用来做日志数据的分析。阿里云实时计算为了方便用户将更多数据采集进入DataHub，提供了...
分区格式化数据盘
不同操作系统的数据盘分区格式化的操作不同，请您根据服务器实际的操作系统进行选择：分区格式化Linux服务器的数据盘的具体操作，请参见 分区格式化Linux服务器的数据盘。分区格式化Windows服务器的数据盘的具体操作，请参见 分区格式化...
生成补丁
采用命令行方式前，需要准备以下JSON格式的配置文件：{"AesKey":"","ClassFilterFilePath":"","KeyAlias":"","KeyPassword":"","KeyStorePassword":"","KeyStorePath":"","NewApkPath":"/path/to/new.apk","OldApkPath":"/path/to/old.apk...
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
下载日志
采用JSON格式时，单条日志的内容会转换为JSON格式，然后以单行形式写入文件。quote字符 选择Quote字符，用于包裹日志中的特殊字符，避免被转义。是否允许下载不精确的结果 如果选择 否，则当出现查询结果不精确时，会下载失败。压缩方式 ...
新旧版本插件转换说明
解析旧版插件 您的旧版插件将保存为json格式，为了便于查看，您可以使用json解析工具解析这些内容。以下为样例。[{"httpConfig":{"protocol":"post","url":"https://domitorgreement-plugin-example-icohrkdjxy.cn-beijing.fcapp.run" },...
支持插件列表
本文列出 PolarDB PostgreSQL版（兼容Oracle）的各版本支持的插件及其版本。说明 如果您的集群实际支持的功能和下表不符，请先升级 内核小版本 至最新版。本页面仅列举了常用插件，更多插件的支持情况，可在数据库内使用 SELECT*FROM pg_...
支持插件列表
本文列出 PolarDB PostgreSQL版 的各版本支持的插件及其版本。说明 如果您的集群实际支持的功能和下表不符，请先升级 内核小版本 至最新版。本页面仅列举了常用插件，更多插件的支持情况，可在数据库内使用 SELECT*FROM pg_available_...
Kafka数据源
offset Long timestamp Long headers String partition Long 离线写数据 DataWorks将数据写入Kafka时，支持写入JSON格式或text格式的数据，不同的数据同步方案往Kafka数据源中写入数据时，对数据的处理策略不一致，详情如下。重要 写入text...
请求应答改写插件（仅专享实例）
2.配置示例 可以选择JSON或YAML格式来配置您的插件，两种格式的Schema相同，可以搜索 yaml to json 转换工具来进行配置格式的转换，YAML格式的模板如下：addRequestParameterIfAbsent:#若Request中不存在该参数，则添加，否则保持不变-name...
HTTP API
将这个map对象序列化成JSON字符串，生成时需要将key按照自然排序即ascii码排序，java可使用JSONObject.toJSONString(mapObject,SerializerFeature.MapSortField)，（注：json需要进行压缩，去掉个字段之间的空格，如后面的代码块）获取 ...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
支持插件列表
ganos_geometry_sfcgal 6.3 6.3 6.3 6.3 6.3 6.3 6.3 提供空间几何sfcgal插件扩展功能。ganos_geometry_topology 6.3 6.3 6.3 6.3 6.3 6.3 6.3 提供空间几何类型的计算分析功能。ganos_geomgrid 6.3 6.3 6.3 6.3 6.3 6.3 6.3 提供H3、...
日志采集支持纳秒精度时间戳
其中的格式化时间模板不是常见的%Y-%m-%d%H:%M:%S，而是使用Go语言的诞生时间 2006-01-02 15:04:05-0700 MST。例如：2023-10-25 01:36:10,199999999 对应的时间格式应该为 2006-01-02 15:04:05,999999999。以下提供Golang官方的时间格式...
视频流接入常见问题
视频流接入问题分析 问题现象 视频流接入是一个涉及浏览器、视频流、播放器多方的综合问题，DataV产品作为可视化页面搭建工具，只是将视频播放器以组件的形式进行集成，由于定位手段比较有限，无法直接深入浏览器、视频流、播放器本身进行...
视频流接入常见问题
视频流接入问题分析 问题现象 视频流接入是一个涉及浏览器、视频流、播放器多方的综合问题，DataV产品作为可视化页面搭建工具，只是将视频播放器以组件的形式进行集成，由于定位手段比较有限，无法直接深入浏览器、视频流、播放器本身进行...
TSL管理
请选择扩展TSL文件 此处上传JSON格式的扩展物模型文件。产品名称 输入一个产品名称。您可以输入与物联网平台控制台上产品名称一致的名称，也可以设置产品别名，方便您后续识别该TSL文件属于哪个产品。单击 确定，保存设置。icmsDocProps={'...
小马智行基础设施自动化（IaC）实践
解决方案 考虑到Terraform使用的是JSON格式的文件，为了解决其代码重用和可读性问题，我们引入开源的JSONnet模板语言来生成Terraform使用的JSON文件，同时封装了丰富的Utils。比如：我们对于创建ECS，封装了如下的Function：generateEcs...
小马智行基于Terraform的IaC实践
解决方案 考虑到Terraform使用的是JSON格式的文件,为了解决其代码重用和可读性问题,我们引入开源的Jsonnet模板语言来生成Terraform使用的JSON文件，同时封装了丰富的Utils。比如：我们对于生成ECS，封装了如下的Function：generateEcs...
JSON和JSONB类型
常用的半结构化类型为JSON和JSONB，在实际业务中JSON和JSONB的区别如下：JSON储存的是文本格式的数据，JSONB储存的是Binary格式的数据。JSON插入速度快，查询速度慢，原因是处理函数必须在每次执行时重新解析该数据。JSONB插入速度慢，而...
- 产品推荐
- 这些文档可能帮助您