录制内容检索与管理
录制文件检索信息在视频直播系统中只保存6个月（过期会删除检索信息，但是不会删除用户录制文件）。ts分片信息在视频直播系统中只保存3个月，创建手动m3u8文件只能选择最近3个月的录制内容（过期会删除ts检索信息，但是不会删除用户录制ts...
功能发布记录
功能名称 变更类型 功能描述 发布时间 相关文档 备注 语义检索功能发布 新增 语义检索能力对您对象存储 OSS 中的文件进行检索，也可以对网盘与相册服务 PDS 中的文件进行检索。2024-03 语义检索 该功能目前仅支持华北（北京）区域 图片聚类...
语义检索
功能简介 传统的标量检索是根据文件携带的元数据信息进行检索，例如文件名称、文件创建时间、文件格式等。与标量检索不同的是，语义检索采用向量检索的方式，可以根据文件内容进行检索，例如“俯瞰森林”、“雪中城市”、“去年夏天的草原...
功能特性
功能集 功能 功能描述 参考文档 检索式处理 语义检索 语义检索采用向量检索的方式，可以根据文件内容进行检索，例如“俯瞰森林”、“雪中城市”、“去年夏天的草原”等文件内容。您可以利用 IMM 语义检索能力对您对象存储 OSS 中的文件进行...
自定义人脸检索
人脸图片检索（本地文件）代码示例#coding=utf-8#以下代码用于调用人脸图片（本地文件）检索接口并返回检测结果。from aliyunsdkcore import client from aliyunsdkcore.profile import region_provider from aliyunsdkgreen.request.v...
DashVector+DashScope升级多模态检索
本教程在前述教程（DashVector+ModelScope玩转多模态检索）的基础之上，基于DashScope上新推出的ONE-PEACE 通用多模态表征模型 结合向量检索服务DashVector来对多模态检索进行升级，接下来我们将展示更丰富的多模态检索能力。DashVector+...
使用向量检索插件（aliyun-knn）
向量检索插件是阿里云Elasticsearch团队自主开发的向量检索引擎插件，基于阿里巴巴达摩院proxima向量检索库实现，能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用向量检索...
使用Elasticsearch的向量近邻检索（kNN）功能
Elasticsearch 8.0及以上版本新增向量近邻检索k-nearest neighbor（kNN）search功能，能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用kNN search功能。背景信息 关于...
文件搜索功能
异常情况 若您无法搜索到目标文件，且确认文件存在，可能是以下几种异常情况：文件已被隔离：因含有敏感词/非法内容/病毒导致文件被隔离无法检索。权限不足：您没有该文件的查看权限，若需要查看该文件，可以联系文件所有者或管理员配置...
[推荐]模型服务灵积DashScope
本文介绍如何通过 模型服务灵积DashScope 进行 多模态向量生成，并入库至向量检索服务DashVector中进行向量检索。模型服务灵积DashScope，通过灵活、易用的模型API服务，让各种模态模型的能力，都能方便的为AI开发者所用。通过灵积API，...
TairVector混合检索实践
您仅需通过一条查询语句即可实现三路结果召回，例如通过待检索的图片、文本、音视频等文件进行向量检索召回、通过输入的文本进行全文检索召回、通过布尔表达式进行条件过滤召回等，Tair向量检索还会对三路召回结果进行权重排序，返回最终的...
DashVector x 通义千问大模型：打造基于专属知识的...
本教程演示如何使用向量检索服务（DashVector），结合LLM大模型等能力，来打造基于垂直领域专属知识等问答服务。其中LLM大模型能力，以及文本向量生成等能力，这里基于 灵积模型服务 上的通义千问 API以及Embedding API来接入。背景及实现...
向量动态量化
背景介绍 量化（Quantization）是向量检索技术中一种常用的优化方法，通过一定程度的精度（召回率）损失，来换取性能的大幅度提升，以及内存占用（索引文件大小）大幅度降低。向量检索服务DashVector支持向量的动态量化，用户仅需在 新建...
插件配置概述
阿里云Elasticsearch支持20余款开源和自研Elasticsearch插件，能够提升集群在稳定性、查询和写入性能、分词查询、数据检索等各方面的能力。本文介绍阿里云Elasticsearch支持的系统默认插件和自定义插件。系统默认插件 系统默认插件为阿里云...
版本特性
开启审计日志后，审计事件将持久保存到<clustername>_audit.json主机文件系统上，不支持索引方式输出。详细信息，请参见 Enabling audit logging。更多变化，请参见 Breaking changes in 7.0。6.x版本（6.3、6.7、6.8版本）新增开源特性：...
使用apack插件的物理复制功能
apack插件是阿里云Elasticsearch团队自研的插件，支持物理复制和向量检索功能，本文仅介绍物理复制功能。物理复制功能适用于索引有副本、写入数据量大、对数据写入后可见性延迟要求不高的场景，例如日志场景、时序分析场景等，可以大幅度...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
数据检索与预览
标签检索 说明 在搜索框中通过输入单个标签的值，或组合多个标签的值，来检索包含这些标签的数据文件。a.标签栏为检索方式时，在检索栏输入检索语法。查询单个标签值：标签名称 in("标签值")。查询多个标签值组合：标签名称1 in("标签值")&...
倒排索引介绍
倒排索引检索的基本流程 当用户查询单词M的倒排索引时，首先引擎会查询词典文件，找到索引词在倒排索引文件（posting文件）的起始位置。随后引擎通过解析倒排链，获取词M存储在倒排链的三部分信息：TermMeta,DocList,PositionList。...
向量计算概述
Proxima的基本模型 Proxima的基本模型分为索引构建和在线检索两部分：索引构建：从原始向量数据中构建出相关索引文件，并传予在线检索模块加载使用。支持多种Brute Force、KD-Tree、Product Quantization、KNN Graph、LSH等。在线检索：...
倒排索引介绍
以提高检索性能 bitmap 用于提高引擎性能，根据用户的配置，将一些倒排结构采用bitmap方式存储，以减少倒排所占空间，提高检索性能 倒排索引检索的基本流程 当用户查询单词M的倒排索引时，首先引擎会查询词典文件，找到索引词在倒排索引...
非结构化分析
文件去重，通过文件指纹去除重复文件。商品图片分析，在大量图片中分析哪些图片包含了同一个商品。向量分析作为 AnalyticDB PostgreSQL版 向量分析的高级特性目前已经服务阿里巴巴内外部多项业务，包括阿里巴巴数据中台，阿里巴巴电商新...
如何快速调用官方预置应用-RAG检索增强应用模板
本篇说明如何快速调用官方预置应用-企业知识检索增强。视频介绍 定义 阿里云百炼提供的RAG检索增强应用模板可以帮助大家实现让大模型瞬间“开挂”的技能。结合上传的知识数据，大模型识别解析学习文档内容，最终给出生成式回复。我们在通义...
阿里云ES机器学习
通过ES机器学习实现对乱码的文本识别 通过ES机器学习实现智能问答 text embedding在ES中的应用 检索是ES的核心功能之一，全文搜索和分析均依赖底层的检索能力，能够快速精确的从海量数据中搜索出所需信息。ES提供了多种内置的文本分析器和...
声纹检索系统
声纹检索，是指通过声音来验证或者识别说话人的声音。声纹识别的关键步是声音向量化，将说话人的声音将其转化成结构化向量。阿里云云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）向量分析功能，提供了一套声纹验证...
概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
AliES内核增强版功能介绍
1.3.0及以上内核版本支持 成本优化 索引压缩插件 支持brotli和zstd等多种压缩算法，实现对索引文件进行压缩，大幅度降低索引的存储大小40%以上。详细信息，请参见：7.16、7.10版本：使用aliyun-codec插件 6.7版本：使用索引压缩插件beta...
管理与使用词库
阿里云Elasticsearch Serverless（简称ES Serverless）允许用户上传和管理词库，提供更为灵活高效的检索能力，使得用户能够根据业务需求灵活地自定义和调整分词策略，助力企业级用户构建智能、高性能的搜索与分析系统。管理词库 登录 阿里...
上传企业知识
文档内容格式要求点击 文档上传格式要求 数据作用范围 用于 在线部分功能说明 描述的「应用设置及测试」中，开启「文档检索」后，文档检索能力数据范围 当上传的文档为Excel时，需要先下载预置的文件模板，按照模板的提示填充内容后再上传...
阿里云大模型RAG对话系统最佳实践
大模型RAG对话系统最佳实践，旨在指引AI开发人员如何有效地结合LLM大语言模型的推理能力和外部知识库检索增强技术，从而显著提升对话系统的性能，使其能更加灵活地返回用户查询的内容。适用于问答、摘要生成和其他依赖外部知识的自然语言...
案例二：搭建文档检索系统
此外，文档检索系统还可以应用于法律和医学领域，用于检索和获取相关的法律文书和医学文献。搭建流程 创建文档数据表 创建文档数据表的SQL语句如下：CREATE TABLE enterprise_context(id bigint(20)NOT NULL AUTO_INCREMENT COMMENT '主键...
查看系统审计到的语句
可选：选择检索的时间段或设置检索条件，单击 检索。您可以单击 更多可选检索条件，设置更多的检索条件。在检索列表查看检索到的SQL语句。您可以在检索列表进行如下操作：选择目标SQL语句，单击 展开语句信息，查看该语句的概要信息。单击...
X-Pack高级特性
SQL 通过传统SQL数据库，实现对Elasticsearch数据的全文本检索和数据统计分析功能。支持CLI、REST等接入方式（Platinum（白金版）的SQL插件还支持JDBC连接）。同原有业务系统无缝对接，降低了新技术的学习成本。说明 Basic（基础版）集成...
人脸检索使用概述
本文介绍了接入人脸检索功能的操作流程。初次接入 如果您初次接入人脸检索功能，想快速进行测试，请参照以下步骤进行操作：创建个体（person）。关于接口的说明，请参见 新建个体。说明 如果分组（group）不存在，创建个体的接口会自动帮您...
解决方案：免费体验AnalyticDB PostgreSQL版以文搜图
本文为您介绍在实际的电商业务中，通过将商品图片集合的向量化结果存储在云原生数据仓库 AnalyticDB PostgreSQL版 向量检索引擎中，实现以文搜图的高效准确检索。背景信息 在现实世界中，绝大多数的数据都是以非结构化数据的形式存在，如...
基于向量检索版+LLM构建对话式搜索
方案优势 优势一：高性能：自研的高性能向量检索引擎 OpenSearch向量检索版支持 千亿数据 毫秒级响应，实时数据更新 秒级可见 OpenSearch向量检索版的检索性能优于开源向量搜索引擎数倍，在高QPS场景下召回率明显优于开源向量搜索引擎 ...
基于向量检索版+LLM构建对话式搜索
方案优势 优势一：高性能：自研的高性能向量检索引擎 OpenSearch向量检索版支持 千亿数据 毫秒级响应，实时数据更新 秒级可见 OpenSearch向量检索版的检索性能优于开源向量搜索引擎数倍，在高QPS场景下召回率明显优于开源向量搜索引擎 ...
常见报错
数据备份，执行PUT_snapshot/my_backup报错：path is not accessiable on master node 报错原因 在进行数据备份时，使用的OSS Bucket是归档存储类型的，读文件前需要解冻，导致了该报错。解决方案 目前阿里云Elasticsearch不支持将数据备份...
DashVector+DashScope升级多模态检索
本教程在 DashVector+ModelScope玩转多模态检索 教程的基础之上，基于DashScope上新推出的ONE-PEACE 通用多模态表征模型 结合 向量检索服务DashVector 来对多模态检索进行升级，接下来我们将展示更丰富的多模态检索能力。DashVector+...
什么是阿里云Elasticsearch
支持在云服务器ECS（Elastic Compute Service）和容器服务ACK（Alibaba Cloud Container Service for Kubernetes）集群中一键部署采集器，可视化采集与配置日志文件、网络数据、容器指标等多种类型数据，并集中管理多个采集器。Logstash ...
- 产品推荐
- 这些文档可能帮助您