阿里云Elasticsearch

阿里云Elasticsearch兼容开源Elasticsearch的功能,以及Security、Machine Learning、Graph、APM等商业功能,致力于数据分析、数据搜索等场景服务。为您提供企业级权限管控、安全监控告警、自动报表生成等场景服务。

将Excel的数据导入数据库

新增任务并将Excel的数据导入数据库。单击新增任务。设置如下参数。参数 说明 文件类型 待导入的数据文件类型。选择CSV。文件字符集 待导入的数据文件使用的字符集。选择自动识别字符集即可。数据库 数据文件需要导入的数据库名称。表 数据...

导入SQL Server数据库数据

本文为您介绍通过SQL Server Management Studio将本地SQL Server数据库中的数据导入云虚拟主机数据库的方法。前提条件 已安装SQL Server Management Studio安装包。说明 您可以前往Microsoft官网,获取SQL Server Management Studio安装包...

MongoDB实例连接数耗尽导致数据库连接失败

问题描述 当MongoDB实例的连接数被耗尽后,新发起的连接请求将无法被响应,以下为连接数据库失败的几种情况:说明:不同的MongoDB实例规格支持的最大连接数有所不同,详情请参见实例规格表。部署的应用程序突然无法连接数据库。已正确设置...

通过Navicat for MySQL导出数据库表中的数据

背景信息 如果数据库的表需要新增或修改的数据较多,您可以先通过Navicat for MySQL将表导出到Excel,在Excel中按照表格式新增数据或修改数据,再通过Navicat for MySQL将表导入MySQL数据库。本文介绍的是导出云虚拟主机MySQL数据库的表到...

如何处理云数据库 RDS PostgreSQL 版使用copy命令导入...

问题描述 在云数据库 RDS PostgreSQL 版中,执行如下SQL语句导入数据。copy mp3(NAME,city,nation,lat,lng,url,mediatype,type)from '/home/alex/tmp/pos.csv' with csv;系统提示如下错误。ERROR:must be superuser to COPY to or from a ...

将MySQL数据库的表导出为一个SQL文件

本文为您介绍将云虚拟主机MySQL数据库的表导出为一个SQL文件的方法。前提条件 本地主机已安装SQLyog。说明 您可以前往SQLyog官网下载。背景信息 如果您通过云虚拟主机管理控制台,下载并解压缩云虚拟主机数据库的备份文件到本地,则可以...

Dataphin管道任务抽取rdbms类数据库数据,切分键使用...

产品名称 Dataphin 产品模块 数据集成 概述 管道任务中来源表数据总数和管道任务同步的数据总数不一致。但是去掉切分键后,再运行任务数据量一致 问题描述 客户管道任务抽取SqlServer数据时,查询来源表数据总数和管道任务同步的数据总数不...

MySQL数据库对外键和索引等名称的长度限制导致创建时...

问题描述RDS产品的MySQL数据库创建索引报如下错误。Identifier&name&'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX'&is&too&long 问题原因因为MySQL数据库对外键和索引等名称的长度有限制,具体如下:Identifier ...

和目标的字符集大小写不一致导致目标库数据缺失

Oracle数据库和MySQL数据库对大小写敏感度的要求不一致。Oracle:区分大小写,对主键或唯一键字段可以插入仅大小写不同的值,如'a'和’A'。MySQL:是否区分大小写由字符序(COLLATE)决定。一般"_ci"表示大小写不敏感;cs"表示大小写敏感...

快速入门

同时您也可以参见数据迁移系列文档,将第三方Elasticsearch、云数据库和大数据云产品数据迁移至阿里云Elasticsearch。产品使用 Elasticsearch Elasticsearch作为实时分布式搜索和分析引擎,可以快速地、近乎于准实时地存储、查询和分析超大...

基本概念

表 1.Elasticsearch与关系型数据库的对应关系 Elasticsearch 关系型数据库 索引(index)数据库(Database)文档类型(type)表(Table)文档(document)一行数据(Row)字段(field)一列数据(Column)映射(mapping)数据库的组织和...

通过OSS将自建Elasticsearch数据迁移至阿里云

当您需要将自建Elasticsearch数据迁移至阿里云Elasticsearch时,可以使用OSS快照的方式进行迁移。即使用Elasticsearch的snapshot API,创建自建Elasticsearch数据的快照,并存储到OSS中,然后从OSS将快照数据恢复到阿里云Elasticsearch中。...

迁移方案选取指南

您可以通过Logstash、reindex和OSS等多种方式完成阿里云Elasticsearch数据迁移、自建Elasticsearch数据迁移至阿里云和第三方Elasticsearch迁移至阿里云。本文介绍各迁移场景对应的迁移方案、适用场景和使用限制,帮助您根据业务选择合适...

授权资源

{"Statement":[{"Effect":"Allow","Action":["elasticsearch:[Elasticsearch RAM Action]","elasticsearch:ListInstance"],"Resource":["[Elasticsearch RAM Action Resource]","acs:elasticsearch:cn-hangzhou:133071096032*:instances/es-...

通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据

ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具,可以让数据Elasticsearch和Hadoop之间双向移动,无缝衔接Elasticsearch与Hadoop服务,充分使用Elasticsearch的快速搜索及Hadoop批处理能力,实现交互式数据处理。...

从AWS迁移Elasticsearch索引至阿里云

本文介绍如何将索引数据从AWS Elasticsearch迁移到阿里云Elasticsearch中。背景信息 本次Elasticsearch索引迁移方案的参考架构如下。相关概念 Elasticsearch:一个分布式的RESTful风格的搜索与分析引擎,适用于各种应用场景。作为Elastic ...

同步方案选取指南

当您在使用关系型数据库(RDS)遇到查询慢的问题时,可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎,可近乎于准实时地存储、查询和分析超大数据集。您可以通过...

通过reindex迁移数据

索引中存在大量数据的情况下,需要修改索引mapping,重新导入数据到新的索引会比较耗时。此时可通过reindex复制索引数据。说明 在Elasticsearch中,定义了索引mapping且导入数据后,将不能再修改索引mapping。前提条件 准备两个阿里云...

产品规格

elasticsearch.sn2ne.xlarge 4核16 GB elasticsearch.sn2ne.2xlarge 8核32 GB elasticsearch.sn2ne.4xlarge 16核64 GB elasticsearch.sn2ne.8xlarge 32核128 GB elasticsearch.r5.large 2核16 GB 1:8规格族 elasticsearch.r5.xlarge 4核32 ...

高安全性

当然黑客组织也一直在关注Elasticsearch,给未进行特殊安全配置的Elasticsearch自建服务带来数据被删除或业务被入侵的安全风险。阿里云安全中心曾发布《Elasticsearch被入侵的安全风险预警》,并提供过一系列安全加固的策略和方案。与自建...

GetRegionConfiguration

clientNodeSpec List["elasticsearch.sn2ne.large","elasticsearch.sn2ne.xlarge","elasticsearch.sn2ne.2xlarge","elasticsearch.sn2ne.4xlarge","elasticsearch.sn1ne.4xlarge","elasticsearch.ic5.xlarge","elasticsearch.ic5.2xlarge",...

基于reindex实现低版本多type数据迁移

本文介绍基于reindex将阿里云Elasticsearch 5.x实例中的多type数据,迁移到高版本Elasticsearch 6.x实例的单type索引中。注意事项 自2020年10月起,由于网络架构的调整,导致部分跨集群通过reindex方式迁移数据的场景受到了限制。在不同的...

快速入门

本文为您介绍如何创建一个阿里云Logstash实例,并通过Logstash的管道配置,完成阿里云Elasticsearch实例间的数据同步。背景信息 在开始本文操作前,请先了解以下背景信息:什么是阿里云Elasticsearch 什么是阿里云Logstash 前提条件 注册...

高可用性

阿里云Elasticsearch提供数据备份与恢复、负载均衡、跨可用区部署,以及保障集群稳定的各类内核优化策略,全方位保障集群数据的可靠性和服务的可用性。数据备份与恢复 备份与恢复方式 说明 自动备份与恢复 阿里云Elasticsearch支持自动数据...

什么是阿里云Logstash

通过配置文件管理管道 使用Logstash管道配置调试功能 相关文档 数据同步 MySQL数据同步:通过Logstash将RDS MySQL数据同步至Elasticsearch MaxCompute数据同步:通过阿里云Logstash将MaxCompute数据同步至阿里云ES PolarDB-X(DRDS)数据...

X-Pack高级特性

数据存储和队列 云服务 容器 网络数据 安全数据 运行状态数据 文件导入 数据扩充 处理器 分析器 分词器 筛选器 语言分析器 Grok 字段转化 外部查询 enrich Geo enrich 模块集成 客户端、API Beats 社区采集agent Logstash ES-Hadoop 插件...

集群管理概述

相关文档 功能描述 冷热数据分离 冷热集群是指在集群中包含冷、热两种属性的节点,可以提高Elasticsearch的处理性能和服务稳定性。当您在使用此种类型的集群时,如果希望提高近期数据查询的效率,同时降低历史数据的存储成本,可以通过该...

什么是阿里云Elasticsearch

作为一款基于RESTful API的分布式服务,Elasticsearch可以快速地、近乎于准实时地存储、查询和分析超大数据集,通常被用来作为构建复杂查询特性和需求强大应用的基础引擎或技术。阿里云Elasticsearch是基于开源Elasticsearch构建的全托管...

通过ES-Hadoop将HDFS中的数据写入Elasticsearch

ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具,可以让数据Elasticsearch和Hadoop之间双向移动,无缝衔接Elasticsearch与Hadoop服务,充分使用Elasticsearch的快速搜索及Hadoop批处理能力,实现交互式数据处理。...

通过DTS将MySQL数据实时同步到阿里云Elasticsearch

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

腾讯云Elasticsearch数据迁移至阿里云

true } Elasticsearch input插件可以根据配置的查询语句,从Elasticsearch集群读取文档数据,适用于批量导入测试日志等操作。默认读取完数据后,同步动作会自动关闭。如果您想实现定时触发数据同步,可以通过cron语法配合schedule参数实现...

通过Canal将MySQL数据同步到阿里云Elasticsearch

步骤六:验证增量数据同步 在RDS MySQL数据库中,新增、修改或删除数据库es_test表的数据。insert `elasticsearch`.`es_test`(`count`,`id`,`name`,`color`)values('11',2,'canal_test2','red');登录目标阿里云Elasticsearch实例的Kibana...

阿里云Elasticsearch数据采集解决方案

与Beats封装在一起的模块为许多常见数据库、操作系统、容器环境、Web服务器、缓存等提供了数据获取、解析、索引和可视化的配置。通过这些模块,可以实现五分钟将数据制作成仪表板进行展示。因为Beats是轻量型的,所以非常适合资源受限的...

创建自定义权限策略

如果阿里云Elasticsearch的系统策略无法满足您的需求,可以通过创建自定义策略实现精细化权限管理。本文介绍如何创建自定义权限策略,并提供实例和标签权限策略配置示例供您参考。前提条件 了解权限策略语言的基本结构和语法。详细信息,请...

Transport Client(5.x)

您可以通过Transport Client 5.3.3访问阿里云Elasticsearch 5.x版本的实例。本文介绍相关配置说明。注意事项 建议您使用5.3.3版本的Transport Client来访问Elasticsearch集群。使用5.5或5.6版本访问Elasticsearch集群会提示...

基于Terraform管理阿里云ES最佳实践

也就是说通过Terraform,写一个配置文件,就可以帮助您购买一台云服务器,或者申请到阿里云Elasticsearch(简称ES)、OSS等云资源。本文介绍通过Terraform管理阿里云ES的方法,包括创建、更新、查看、删除实例等操作。背景信息 您可以通过...

ListAvailableEsInstanceIds

返回数据 名称 类型 示例值 描述 RequestId String 5FFD9ED4-C2EC-4E89-B22B-1ACB6FE1*请求ID。Result Array of Result 返回结果。description String instanceName Elasticsearch实例名称。endpoint String http://es-cn-n6w1o1x0w001c*....

使用DataV大屏展示阿里云Elasticsearch数据

通过在DataV中添加阿里云Elasticsearch数据源,您可以使用DataV访问阿里云Elasticsearch服务,完成数据的查询与展示。本文介绍如何使用DataV大屏展示阿里云Elasticsearch数据。前提条件 您已完成以下操作:创建阿里云Elasticsearch实例。...

开源Elasticsearch FAQ

本文汇总了开源Elasticsearch相关的常见问题。如何配置索引线程池大小?出现内存溢出OOM(OutOfMemory)的错误,如何处理?如何手动对shard进行操作?Elasticsearch的缓存清除策略有哪些?如何重新分配索引分片(reroute)?索引查询时,...
< 1 2 3 4 ... 200 >
跳转至: GO

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折