检查索引使用
尽管本数据库中的索引并不需要维护或调优，但是检查真实的查询负载实际使用了哪些索引仍然非常重要。检查一个独立查询的索引使用情况可以使用EXPLAIN命令。也可以在一个运行中的服务器上收集有关索引使用的总体统计情况。很难明确地表达...
开启日志采集功能
CloudLens for SLS 支持一键开启日志采集功能，用于采集 全局日志（审计日志、错误日志、监控指标）和 运行日志。本文介绍开启日志采集功能...重要 重置后，索引将恢复到内置索引最新版本，自定义索引被删除，且重置后的索引只对新数据生效。
ORDER BY LIMIT执行效率低
根据 ORDER BY 后的索引$A 对数据排序。选择$N 条数据返回。选择 ORDER BY 后的索引$A，执行计划二：通过 ORDER BY 后的索引$A 扫描数据。应用条件$CONDITION 筛选出$N 条数据返回。某些SQL语句中条件$CONDITION 筛选出的数据量大，LIMIT的...
ORDER BY LIMIT执行效率低
根据 ORDER BY 后的索引$A 对数据排序。选择$N 条数据返回。选择 ORDER BY 后的索引$A，执行计划二：通过 ORDER BY 后的索引$A 扫描数据。应用条件$CONDITION 筛选出$N 条数据返回。某些SQL语句中条件$CONDITION 筛选出的数据量大，LIMIT的...
基于reindex实现低版本多type数据迁移
本文介绍基于reindex将阿里云Elasticsearch 5.x实例中的多type数据，迁移到高版本Elasticsearch 6.x实例的单type索引中。注意事项 2020年10月阿里云ES进行了网络架构调整，新网络架构下的集群跨集群reindex需依赖Privatelink打通阿里云ES...
创建录制索引文件
直播录制索引是将视频直播流以M3U8的格式进行录制，存储在OSS中后，对已存储的TS分片索引文件进行实时的剪辑处理。说明 创建录制索引必保证直播流发生过推流行为，如果设置的时间内未发生过直播或直播流名称错误等会导致创建录制索引失败。...
免费体验PolarDB MySQL列存索引（IMCI）
列存索引 IMCI对 查询的处理更高效 说明 由于实时监控数据可能存在延迟，为了确保展示完整的CPU变化情况，趋势图中会在SQL执行完后，自动延长一定监控时间（2~3秒）。从执行时间和对应的CPU占用率可以看到，IMCI通过更低的CPU占用率实现了...
查询和分析JSON日志
全文索引和字段索引的更多信息、创建索引的详细步骤，请参见 创建索引。说明 如果需要查询日志中的所有字段，建议使用全文索引。如果只需查询部分字段、建议使用字段索引，减少索引流量。如果需要对字段进行分析（SELECT语句），必须创建...
列存索引常见问题
列存索引的使用方式完全兼容MySQL，但是一些不常见的查询特性，比如某些时空类型的表达式、全文索引以及某些形式的关联子查询，目前尚未完全支持，使用了这些查询特性的SQL语句无法使用列索引（会默认使用行索引进行查询）。有关列索引的...
部分索引
一个 部分索引 是建立在表的一个子集上，而该子集则由一个条件表达式（被称为部分索引的 谓词）定义。而索引中只包含那些符合该谓词的表行的项。部分索引是一种专门的特性，但在很多种情况下它们也很有用。使用部分索引的一个主要原因是...
新旧版本使用指引
新增功能 更强大的数据处理能力 数据处理现已支持音视频处理、文档处理、图片智能、音视频智能、文件处理、内容安全等。更灵活的数据管理、数据查询能力 媒体集（Set）升级为数据集（Dataset），支持全类型文件的元数据抽取以及元数据查询...
列存索引行列融合基础组件介绍
本文介绍了列存索引行列融合基础组件（优化器代价模型、执行器多引擎访问、存储引擎日志回放和事务处理）以及处理长尾请求问题的HybridIndexSearch算子的相关内容。背景信息 事务处理（OLTP）和分析处理（OLAP）混合工作负载在当前的业务...
查询不到日志的排查思路
本文主要介绍在日志服务控制台中使用日志查询功能时，查询不到日志的排查思路。未成功采集日志 如果未成功采集日志到日志服务，则无法查询到目标日志。请在采集的预览界面查看是否有日志。如果有，说明已采集到日志，建议您排查其他原因。...
多元索引虚拟列
使用多元索引虚拟列功能时，您可以通过修改多元索引schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。说明 关于多元索引虚拟列的更多信息，请参见 虚拟列。注意事项 SQL查询目前不支持多元...
索引优化
AnalyticDB PostgreSQL版 数据库支持B-Tree、Bitmap，BRIN，GiST和GIN索引，不支持Hash索引。每一种索引类型都使用一种不同的算法，它们最适合的查询类型也不同。B-Tree索引适合于最常见的情况并且是默认的索引类型。说明 AnalyticDB ...
通过控制台使用多元索引
如果实际业务中要用到非主键列查询、多条件组合查询等多种查询功能，您可以通过控制台为数据表创建多元索引，然后使用多元索引查询数据。前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1，数据生命周期（Time to Live...
TimeStream API功能介绍
阿里云Elasticsearch提供Aliyun-TimeStream时序增强插件，支持通过API接口完成TimeStream索引的增删改查，以及数据写入和查询。本文介绍如何使用TimeStream API。背景信息 TimeStream是阿里云Elasticsearch团队自研，并结合Elastic社区时序...
锁定和索引
尽管本数据库提供对表数据访问的非阻塞读/写，但并非本数据库中实现的每一个索引访问方法当前都能够提供非阻塞读/写访问。B-tree、GiST 和 SP-GiST索引：短期的页面级共享/排他锁被用于读/写访问。每个索引行被取得或被插入后立即释放锁。...
搜索增强
服务创建 单击快速创建，选择搜索增强，进入服务创建界面，编辑服务名称并选择服务所使用的引擎及数据源，完成创建后进入索引配置界面。引擎 提供检索服务的基础组建，可在资源中心进行引擎管理也可在快速创建页面直接选择或添加。更多信息...
聚合操作
DataFrame提供对列进行HyperLogLog计数的接口。from odps.df import DataFrame iris=DataFrame(o.get_table('pyodps_iris'))常用聚合操作如下：使用 describe 函数，查看DataFrame里数字列的数量、最大值、最小值、平均值以及标准差。print...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
调试指南
由于PyODPS DataFrame本身会对整个操作执行优化，为了更直观地反应整个过程，您可以使用可视化的方式显示整个表达式的计算过程。可视化DataFrame 可视化需要依赖 graphviz软件 和 graphviz Python包。df=iris.groupby('name').agg(id=iris....
PolarDB HTAP实时数据分析技术解密
对每一个计算表达式，其输入和输出都以Batch为单位，在Batch处理模式下，计算过程可以使用SIMD指令进行加速。即表达式系统有两项关键优化：充分利用列式存储的优势，使用分批处理模型代替迭代器模型，使用SIMD指令重写大部分常用数据类型的...
Python SDK常见问题
如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取多于1万条的记录？为什么尽量使用内建算子，而...
PyODPS常见问题
本文为您介绍使用PyODPS时的常见问题。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上安装...
数据流管理
数据流管理功能可以实现跨多索引存储，且仅追加时间序列数据，同时为请求提供唯一的命名资源。本文介绍如何创建数据流、查看或删除数据流、滚动更新数据流等。背景信息 数据流管理功能适用于日志、事件、指标和其他连续生成数据的场景。...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
自定义GeoJSON
层级索引：0-0表示是第一层第一个区块，以此类推，0-0-0表示是江苏省中的第一个区块南京市。区块中心点：{"type":"Point","coordinates":[119.486506,32.983991]}（是以WKT标准定义的单个点格式，coordinates是当前区块的中心点经纬度。...
DDL
Lindorm CQL支持使用CQL语言操作Lindorm高性能二级索引以及Lindorm全文索引Search Index，满足用户对于索引的使用需求。Keyspace和Table的语法定义 Lindorm CQL Keyspace语法定义：keyspace_name:=name name:=unquoted_name|quoted_name ...
DataFrame概述
同时能在本地使用同样的接口，用Pandas进行计算。快速入门：为您介绍如何创建和操作DataFrame对象，以及使用Dataframe完成基本的数据处理。创建DataFrame：为您介绍如何创建DataFrame，用于引用数据源。Sequence：为您介绍Sequence。...
创建索引
倒排索引是一种数据存储结构，由关键词和指向实际数据的逻辑指针组成，记录了特定文本内容出现在哪些日志中，用于快速根据关键词定位到具体数据行，类似于数据的目录。创建索引后，您才能对日志数据进行查询和分析。本文为您介绍日志服务...
TimeStream管理Elasticsearch时序数据快速入门
PUT_time_stream/test_stream 与直接通过Elasticsearch create index命令（PUT test_stream）创建的索引相比，通过TimeStream的创建索引接口创建的索引是 DataStream索引，而不是一个具体的索引，并且自动集成了Elasticsearch在时序场景的...
搜索索引介绍
云原生多模数据库 Lindorm 宽表引擎除了支持高性能原生二级索引，也支持一种新的索引类型，称为搜索索引（SearchIndex），搜索索引主要面向复杂的多维查询场景，能够覆盖分词、模糊查询、聚合分析、排序翻页等场景。本文介绍搜索索引的功能...
Vector
HNSW索引的向量删除采用标记删除的方式，开启该功能后，支持索引空间的自动回收，可有效降低内存占用，但该功能会影响该索引近邻查询的性能，推荐对内存占用量敏感的场景使用该功能。HybridIndex（混合索引）的特定参数，取值说明如下：...
REINDEX
语法 REINDEX[(option[,.])]{ INDEX|TABLE|SCHEMA|DATABASE|SYSTEM }[CONCURRENTLY]name 其中 选项 可以是以下之一：VERBOSE 简介 REINDEX 使用索引的表里存储的数据重建一个索引，并且替换该索引的旧拷贝。有一些场景需要使用 REINDEX：...
通过索引生命周期管理实现冷热数据分离
其中hot阶段主要负责对索引进行滚动更新操作，warm、cold、delete阶段主要负责进一步处理索引数据，详细说明如下。阶段 描述 hot 热数据阶段。主要处理时序数据的实时写入，可根据索引的文档数、大小、时长决定是否调用 rollover API 来...
时空查询的性能调优
为了提高时空查询的性能，需要确保查询条件能够使用到时空索引，从而避免全表扫描。本文介绍时空查询的优化方法。时空查询的优化 当查询条件只有空间范围或者包含空间范围和时间范围时，创建时空索引需要使用 Z-ORDER 索引函数对空间列或者...
概述
使用场景 Mars与PyODPS DataFrame使用场景如下：Mars 经常使用PyODPS DataFrame的 to_pandas()方法，将PyODPS DataFrame转换成Pandas DataFrame的场景。熟悉Pandas接口，但不愿意学习PyODPS DataFrame接口的场景。使用索引的场景。创建...
TrajGisT索引
TrajGisT索引是GisT索引的扩展。背景信息 在GisT基础上，TrajGisT提供额外两点优化：TrajGisT对索引的开销估计进行了优化，当建立了多个索引时，TrajGisT可以比GisT更好地在不同索引之间进行选择。TrajGist支持索引的向上兼容，即当索引所...
新建表
HASH 索引基于 HASH 表实现，只有查询条件精确匹配 HASH 索引中的所有列才会用到 HASH 索引，仅能满足"=","IN"和"<=>"查询，HASH 索引无法用于排序，不适用于区分度小的列上，例如员工性别（gender）。索引类型 默认值为 NORMAL，支持 ...
- 产品推荐
- 这些文档可能帮助您