云端流计算、在线业务、实时分析 闭环设计 - 阿里云RDS、HybridDB for PostgreSQL最佳实践
背景 水的流动汇成江河大海，孕育生命，形成大自然生态。数据流动，推进社会进步，拓展业务边界。 《从人类河流文明 洞察 数据流动的重要性》 以某淘系业务案例展开，看看用户如何利用阿里云RDS PostgreSQL，HybridDB for PostgreSQL，海量对象存储OSS，打造一个从流计算到在线业务，再到数据分析和挖掘的业务，发挥数据的价值，拓展业务的边界。 业务简介 一个电商业务通常会.....
机票业务(单实例 2700万行/s return)数据库架构设计 - 阿里云RDS PostgreSQL最佳实践
背景 机票业务的某个模块，数据量10亿+，写、更新、删除量较低。根据KEY查询一些数据，每次查询返回1万条左右的记录。 就是这样简单的需求，业务方发现读成为了巨大的瓶颈，每次返回1万条，100个并发请求，每秒就是100万条（500MB左右），主要的瓶颈： 1、网络是个较大的开销。 2、不同KEY的数据可能是分散存放的，存在查询时的IO放大，可能有一定的性能影响。 3、每次请求的返回记录数较多，数....
全文检索 (不包含、不等于) 索引优化 - 阿里云RDS PostgreSQL最佳实践
背景 PostgreSQL内置了GIN索引，支持全文检索，支持数组检索等多值数据类型的检索。 在全文检索中，不包含某个关键字能用到索引吗？ 实际上GIN是倒排索引，不包含某个关键字的查询，实际上是跳过主tree上面的TOKEN的扫描。 只要被跳过的TOKEN包含了大量数据，那么就是划算的。PostgreSQL是基于CBO的执行计划优化器，所以会自动选择最优的索引。 例子1，全文检索不包含查询 .....
每天万亿+级 实时分析、数据规整 - 阿里云HybridDB for PostgreSQL最佳实践
背景 横看成岭侧成峰， 远近高低各不同。 不识庐山真面目， 只缘身在此山中。 不同的视角我们所看到的物体是不一样的， http://t.m.china.com.cn/convert/c_ovWL9w.html 图为墨西哥城放射状的街区广场。 图为西班牙迷宫般的果树漩涡。 地心说和日心说也是视角不同所呈现的。 实际上数据也有这样，我们每天产生海量的数据，有各种属性，以每个属性为视角（分组、...
MPP分布式数据库性能评估方法 - 阿里云HybridDB for PostgreSQL最佳实践
背景 通常评估一个数据库的性能，可以选择工业标准测试，或者根据业务模型，建模进行测试。 例如PostgreSQL pgbench支持的tpc-b测试，以及自定义模型测试。 benchmarksql支持的tpc-c测试。 gp_tpch支持的tpc-h测试等等。 参考文档如下 《TPC-H测试 - PostgreSQL 10 vs Deepgreen(Greenplum)》 《PostgreSQL....
时间、空间、对象 海量极速多维检索 - 阿里云RDS PostgreSQL最佳实践
标签 PostgreSQL , 时间 , 空间 , 对象属性 , 多维度检索 , 海量 , 空间索引 , 数据分区 , 块级索引BRIN , 多级索引 , GIN倒排索引 , JSON索引 , 多列索引 , 多索引扫描合并 , bitmapAnd , bitmapOr , 物理扫描 , ctid扫描 , intersect , partial index , partition index ...
车联网案例，轨迹清洗 - 阿里云RDS PostgreSQL最佳实践 - 窗口查询
标签 PostgreSQL , 窗口函数 , 车联网 , 轨迹 , 轨迹清洗 , lag , lead 背景 车联网中一个非常典型的场景是采集车辆的行驶轨迹，通常来说车辆的轨迹并不会实时上报，可能会堆积若干条轨迹记录，或者间隔多少时间上报一次。 一个典型的数据结构如下 (car_id, pos geometry, crt_time timestamp) 车辆在行驶，行驶过程中会遇到堵车...
分区索引的应用和实践 - 阿里云RDS PostgreSQL最佳实践
标签 PostgreSQL , partial index , partition index 背景 当表很大时，大家可能会想到分区表的概念，例如用户表，按用户ID哈希或者范围分区，拆成很多表。 又比如行为数据表，可以按时间分区，拆成很多表。 拆表的好处： 1、可以将表放到不同的表空间，表空间和块设备挂钩，例如历史数据访问量低，数据量大，可以放到机械盘所在的表空间。而活跃数据则可以放到SSD...
PostgreSQL 10 流式物理、逻辑主从 最佳实践
标签 PostgreSQL , 流复制 , 主从 , 逻辑订阅 背景 流复制起源 PostgreSQL 自从2010年推出的9.0版本开始，支持流式物理复制，用户可以通过流式复制，构建只读备库(主备物理复制，块级别一致)。流式物理复制可以做到极低的延迟（通常在1毫秒以内）。 同步流复制 2011年推出的9.1版本，支持同步复制，当时只支持一个同步流复制备节点（例如配置了3个备，只有一个是...
《PostgreSQL服务器编程》一一1.8 程序设计最佳实践
本节书摘来自华章计算机《PostgreSQL服务器编程》一书中的第1章，第1.8节,作者：（美）Hannu Krosing, Jim Mlodgenski, Kirk Roybal 著，更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.8 程序设计最佳实践 开发应用程序软件是复杂的。一些有助于管理复杂性的方法非常流行，以至于它们被赋予容易记忆的首字母缩略词。接下来，我们就会介绍一些这样....
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
PostgreSQL更多最佳实践相关
PostgreSQL您可能感兴趣
- PostgreSQL polardb
- PostgreSQL引擎
- PostgreSQL sqlserver
- PostgreSQL mpp
- PostgreSQL greenplum
- PostgreSQL集群
- PostgreSQL data
- PostgreSQL htap
- PostgreSQL架构
- PostgreSQL编译安装
- PostgreSQL analyticdb
- PostgreSQL手册
- PostgreSQL数据
- PostgreSQL rds
- PostgreSQL查询
- PostgreSQL同步
- PostgreSQL oracle
- PostgreSQL索引
- PostgreSQL mysql
- PostgreSQL语言
- PostgreSQL安装
- PostgreSQL阿里云
- PostgreSQL服务器
- PostgreSQL分析
- PostgreSQL性能
- PostgreSQL函数
- PostgreSQL配置
- PostgreSQL功能
- PostgreSQL版本
- PostgreSQL报错
