数据建模诊断
分区字段不合理判定规则 如果表中有10%以上的分区记录条数不在合理区间则视为不合理，具体的判定规则见下表：节点数 二级分区数据行数 1 1600 w~16000 w 2 6400 w~64000 w 4~6 12800 w~128000 w 8~14 19200 w~192000 w 16~30 25600 w~...
ODS层设计规范
每个ODS全量表必须监控分区空数据。仅有监控要求的ODS表才需要创建数据质量监控规则。您可以通过DataWorks配置数据质量监控规则，详情请参见 配置数据质量监控。建议对重要表的重要枚举类型字段进行枚举值变化及枚举值分布监控。建议对ODS...
普通表转换为分区表
ALTER TABLE t1 partition BY LIST(a)(PARTITION p0 VALUES IN(1,2,3,4,5),PARTITION p1 VALUES IN(6,7,8,9,10),PARTITION pd DEFAULT PARTITIONS 9);将表 t1 转换为HASH分区表。ALTER TABLE t1 partition BY HASH(a)PARTITIONS 12;将表 t1...
告警时间设置说明
概览 告警中涉及到时间设置，在告警流程中的执行时序如下：时间设置 功能 时间设置 含义 应用监控告警规则 检查最近T 1 分钟的指标 告警检查时，对应用监控指标 T 1 分钟内的数据进行聚合计算。Prometheus告警规则 告警规则检查周期T 2 ...
重组分区
注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上；若要对二级分区进行重组操作，要求 PolarDB-X 实例版本必须为5.4.17-16952556及...给k_r_tp_t1表的二级分区模板的sp1、sp2重组为新sp4、sp5、sp6，且新的分区定义如下：...
分区分裂
场景 3：目标分区为模板化的二级分区 当二级分区是模板化分区时，可以通过分裂语法直接将某个模板二级分区分裂，分裂模板二级分区会使所有的一级分区下的子分区同时分裂。模板化二级分区是Range/Range column策略的分区表分裂 表级用法 ...
监控
本文介绍如何在本地块网关控制台监控本地块网关的网络、硬盘读写总量、硬盘IOPS、内存和CPU等信息。操作步骤 在浏览器中，输入 https://<块网关IP地址>访问本地块网关控制台。输入用户名和密码，单击 确认。单击 监控，进入 监控 页面，...
变更TTL表
普通表转换成TTL表 ALTER TABLE t_order LOCAL PARTITION BY RANGE(gmt_modified)STARTWITH '2021-01-01' INTERVAL 1 MONTH EXPIRE AFTER 12 PRE ALLOCATE 6;说明 普通表转换成TTL表需要进行数据搬迁，请在业务低峰期进行操作。
ePQ支持分区表查询
6)->Append->Partial Seq Scan on t3_p1->Partial Seq Scan on t3_p2->Partial Seq Scan on t3_p3 Optimizer:PolarDB PX Optimizer(14 rows)从执行计划中可以看出，执行 slice1 计划分片的六个进程会分别通过 Append 算子依次扫描分区表 ...
ePQ支持分区表查询
6)->Append->Partial Seq Scan on t3_p1->Partial Seq Scan on t3_p2->Partial Seq Scan on t3_p3 Optimizer:PolarDB PX Optimizer(14 rows)从执行计划中可以看出，执行 slice1 计划分片的六个进程会分别通过 Append 算子依次扫描分区表 ...
创建TTL表
如果需要将t_order的物理表按照gmt_modified列进行时间分区，每个分区间隔一个月，每个分区12个月后过期，提前创建3个分区，创建语法如下：CREATE TABLE t_order(id bigint NOT NULL AUTO_INCREMENT,gmt_modified DATETIME NOT NULL,...
DeleteQualityFollower
您可以通过订阅管理，为分区表达式添加订阅用户，添加后，当该分区表达式的监控规则被触发，则相应用户会收到消息通知，方便您及时发现并处理问题。详情请参见 配置监控规则。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算...
分区和列操作
合并分区 对分区表的分区进行合并，即同一个分区表下的多个分区合并成一个分区，同时删除被合并的分区维度的信息，把数据移动到指定分区。清空分区数据 清空指定分区的数据。列操作 添加列或注释 为已存在的非分区表或分区表添加列或注释。...
ALTER TABLE
限制条件 MaxCompute单表支持的分区数量上限为6万个。对于有多级分区的表，如果需要添加新的分区值，必须指明全部的分区。仅支持新增分区值，不支持新增分区字段。命令格式 alter table<table_name>add[if not exists]partition[partition...
配置规则：按表（单表）
多级分区表达式 1级分区名=分区值/2级分区名=分区值/N级分区名=分区值 分区值可以是固定值，也可以是内置参数表达式。参数必须使用中括号表示，例如，$[yyyymmdd-N]。分区表必须配置到最后一级分区。DataWorks为您提供了部分内置的业务日期...
创建混合分区
混合分区原理如下图所示：混合分区的基本原理是将分区表中的分区存储在不同的存储介质上，以达到冷热数据分离管理的目的。比如将热数据存储在本地PFS上，冷数据存储在OSS上，这样可以极大地降低冷数据的存储成本，且不影响热数据的查询性能...
分区裁剪
云原生数据仓库AnalyticDB PostgreSQL版 支持静态分区和动态分区裁剪。在扫描分区表前，能通过检查分区约束条件与每个分区的定义，提前排除不需要扫描的分区，大大减少从磁盘中读取的数据量，从而缩短运行时间，改善查询性能，减少资源浪费...
分区表常见问题
假设分区表 t1 的历史分区为 p0 和 p1，需要将这两个历史分区中的数据迁移到新分区表 t2 的 p0 和 p1 分区中。操作步骤如下：创建新的分区表 t2，表结构与 t1 保持一致，且包含 p0 和 p1 分区。创建普通表 temp，表结构与需要迁移的分区表...
CreateOrUpdateAlertRule-创建或修改告警规则
ceba9b9ea5b924dd0b6726d2de6*AlertGroup long 否 Prometheus 告警规则的告警分组 ID。1：自定义 PromQL 1：Kubernetes 负载 15：Kubernetes 节点-1 PromQL string 否 Prometheus 告警规则的 PromQL 语句。node_memory_MemAvailable_bytes{...
分区合并
执行以下SQL将表组mytg1的p1、p2合并成一个新分区p12（意味着tb1和tb2的分区p1、p2会同步的合并成一个新分区p12）：ALTER TABLEGROUP mytg1 MERGE PARTITIONS p1,p2 TO p12 List/List column 分区表分区合并 对于list/list column分区策略...
变更表类型及分区策略（AUTO模式）
本文介绍了变更表类型（即在单表、广播表和分区表三者间进行相互转换）及分区策略（包括拆分函数或分区列）的相关语法和示例。本语法仅适用于AUTO模式数据库。前提条件 仅适用于分区模式为auto/partitioning的逻辑库（请参见 CREATE ...
归档为CSV或ORC格式
本文介绍了将冷数据归档为CSV或ORC格式的方法，以及将OSS表数据导回至...示例 在数据库中，将归档在OSS上的分区表 t 中 p1 分区上的数据导回至PolarStore。ALTER TABLE t REORGANIZE PARTITION p1 INTO(PARTITION p1 values less than(100));
GetAlertRules-获取已经创建的告警规则
["t like '%api%'"]AlertCheckType string Prometheus 监控告警规则的告警检查类型。STATIC：静态阈值类型。CUSTOM：自定义 PromQL 类型。STATIC ClusterId string Prometheus 监控告警规则的集群 ID。ceba9b9ea5b924dd0b6726d2de6*...
全局二级索引（GSI）
局部索引单个分区的数据由分区表单个分区的数据构建而成，且局部索引的分区与分区表的分区一一对应，所以，局部索引的索引数据只能保证在单个分区内有序，如果您想创建局部唯一索引，则索引字段必须包含全部的分区键。当分区表上只存在局部...
分区表管理（auto_partition）
AnalyticDB PostgreSQL版 支持将大表定义为分区表，并支持通过auto_partition插件对分区表进行自动删除或新增，当您进行条件查询时，系统只会扫描满足条件的分区，避免全表扫描，从而提升查询性能。新增分区的粒度包括小时，天，星期，月，...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
Python SDK示例：Table
record([111,'aaa',True]),#也可以是Record对象 t.new_record([222,'bbb',False]),t.new_record([333,'ccc',True]),t.new_record([444,'中文',False])]writer.write(records)如果分区不存在，可以使用 create_partition 参数指定创建分区，...
表
PyODPS支持对MaxCompute表的基本操作，包括创建表、创建表的Schema、同步表更新、获取表数据、删除表、表分区操作以及如何将表转换为DataFrame对象。背景信息 PyODPS提供对MaxCompute表的基本操作方法。操作 说明 基本操作 列出项目空间下...
创建分区表
prod_name|cnt|y|m|+-+|显示器|2|2019|2|硬盘|6|2018|12|键盘|3|2018|12|鼠标|1|2019|2|可以使用分区列作为查询过滤条件：select*from dla where y='2019';prod_name|cnt|y|m|+-+|显示器|2|2019|2|鼠标|1|2019|2|管理分区 同步分区信息 当...
如何计算应用监控与其他开源监控成本？
2.开源自建成本估算（单位：人民币）监控节点数 Collector节点数 ZooKeeper节点数 集群配置 费用 100 3 1 一个单可用区 3节点 8核CPU 32G内存 894GB SSD硬盘 Elasticsearch 4×2426+63,065=72,769 300 8 1 一个双可用区 6节点 16核CPU 64G...
版本说明
本文为您介绍云监控插件的版本发布信息。3.5.11 分类 说明 发布时间 2024-03-25 新特性 Windows正式支持x64。支持IPv6。支持HTTP2。支持macOS和FreeBSD（基于sigar库）。代理扩展为支持七种代理协议：HTTP、HTTPS、HTTPS/2、Socks4、Socks4...
Cursor-定义导出监控数据的范围
调用Cursor接口定义导出监控数据的范围，并返回用于初始调用BatchExport接口的Cursor值。接口说明 前提条件 请确保您已开通企业云监控。具体操作，请参见 开通企业云监控。背景信息 先调用本接口获取初始的 Cursor，再调用 BatchExport ...
LIST DEFAULT HASH
创建LIST DEFAULT HASH分区表 语法 PolarDB 支持新的分区类型，前面是普通的LIST分区，不在LIST分区中的数据放在DEFAULT分区，如果DEFAULT分区太大可以根据HASH规则分成多个DEFAULT分区：CREATE TABLE[schema.]table_name table_definition...
配置规则：按模板（批量）
数据质量为您提供数十种预设表级别、字段级别的监控模板。本文为您介绍如何按模板配置监控规则。背景信息 内置模板分为表级和字段级的模板规则，支持您通过内置规则模板来快速为一批表批量创建数据质量规则。还支持您按表配置数据质量规则...
新功能发布记录
2022-12-22 功能名称 功能描述 功能类型 相关文档 监控报警 云消息队列 Kafka 版 新增实例级别监控：Kafka实例公网写入带宽监控 Kafka实例公网读取带宽监控 新增 云监控 2022-12-14 功能名称 功能描述 功能类型 相关文档 监控报警 云消息...
QueryMetricByPage-查询监控指标
分页查询应用监控或前端监控的相关监控指标。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
QueryMetricByPage-查询监控指标
分页查询应用监控或前端监控的相关监控指标。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
通过HTTP上报监控数据
服务地址 云监控用于上报自定义事件的服务地址，请参见 上报监控数据的服务地址。请求语法 通过HTTP方式上报监控数据的请求语法如下：POST/metric/custom/upload ...
配置示例：MaxCompute
多级分区表达式格式：1级分区名=分区值/2级分区名=分区值/N级分区名=分区值，分区值可以是固定值，也可以是内置参数表达式。参数必须使用中括号表示，例如$[yyyymmdd-N]。分区表达式周期由配置的业务日期决定，例如配置运行时间为前5天，则...
动态分区
本文介绍 云数据库 SelectDB 版 动态分区相关的概念和示例，帮助您进行分区的动态管理，降低您的使用成本。概述 在某些场景下，可能会将数据库表按照天进行分区划分。如果需要手动管理分区，可能由于没有创建分区导致数据导入失败，这给...
- 产品推荐
- 这些文档可能帮助您