云数据库 HBase

面向大数据领域的一站式NoSQL服务,适用于GB至PB级的大规模吞吐、检索、分析工作负载,是为淘宝推荐、支付宝账单、花呗风控、监控、广告投放、物流轨迹、手淘消息等众多阿里巴巴核心服务提供支撑的数据库

数据导入与迁移

HBase增强版支持从阿里云RDS,MySQL,不同HBase版本(含阿里云HBase和自建HBase集群)导入数据,并进行实时的增量同步,也支持将数据迁移到不同版本的HBase中。数据的导入和迁移,都是基于LTS服务实现。RDS增量数据同步 通过BDS数据同步...

创建同步任务

本文主要介绍如何在HBase中创建同步任务。前提条件 已成功购买LTS实例。操作步骤 登录云数据库HBase版控制台。在左侧导航栏选择集群列表,单击LTS...创建数据导入任务,详情请参见HBase数据导入。创建数据导出任务,详情请参见HBase数据导出。

LTS(原BDS)服务介绍

HBase支持订阅SLS实时数据到HBase日志服务(SLS)增量导入HBase增量数据订阅支持云HBase增强版实时订阅使用指南日志生命周期管理说明开启日志订阅后,如果不消费数据,默认日志会保留48小时,超时后订阅关系自动取消,保留的数据自动删除什么...

日志服务(SLS)增量导入

本文主要介绍日志服务(SLS)增量导入的操作过程。前提条件已购买LTS数据迁移同步服务,配置LTS操作页面账户密码,并登录LTS操作页面。已登录LTS操作页面,创建HBase数据源。已登录LTS操作页面, 创建Loghub数据源。HBase版本自建HBase1.x、2...

数据导入Serverless实例

大量数据从HBase集群导入Serverless由于Serverless实例的写入受到购买CU数的限制,如果大量的数据直接通过API写入Serverless实例可能会花费过多时间和消耗过多CU(根据购买CU的多少,几十GB,几百GB,或者上TB的数据可以定义为大量数据)...

RDS全同步和增量同步

本文主要介绍RDS全同步和增量同步的操作过程。...导入HBase默认生成列簇,RDS中的字段会和f下列一一对应,同时rowkey为RDS主键字符串拼接。默认生成配置会跳过RDS删除操作如果保留需要手动修改配置,详见配置说明。单击创建。

RDS增量导入

本文主要介绍在HBase中如何进行RDS增量导入。前提条件 已购买LTS数据迁移同步服务,配置LTS操作页面账户密码。已打通LTS和HBase迁移集群的网络。已添加HBase集群数据源。开通DTS订阅服务,添加DTS数据源。适用版本 自建HBase1.x、2.x EMR ...

增量归档MaxCompute

本文主要介绍如何在Hbase中进行增量归档MaxCompute。前提条件已开通LTS。已添加HBase数据源。已添加MaxCompute数据源。支持版本自建HBase1.x、2.x。EMR HBase。标准版云HBase、增强版云HBase(集群版本)、Lindorm。限制实时数据归档基于...

增量数据同步

本文主要介绍全增量数据同步的使用场景,功能列表,迁移优势,使用限制以及创建数据同步任务等操作。使用场景大版本升级:HBase1.x升级HBase2.x。跨地域迁移 例如从青岛机房迁移到北京机房。集群升配:从4核8G迁移到8核16G集群。业务拆分:...

产品优势

通过LTS(原BDS)服务介绍,支持SLS数据到HBase的日志服务(SLS)增量导入 数据集成需要较大开发 服务能力 可用性SLA 提供SLA保障,单集群99.9%,双集群高可用99.99%N/A 运维成本 全托管,无需复杂的数据库运维投入 N/A 技术团队 由多名...

从云HBase标准版/自建开源HBase迁移到云HBase增强版...

为什么要迁移云HBase增强版云HBase增强版是基于云原生多模数据库Lindorm内核研发的、完全兼容HBase的云上托管数据库,已经在阿里集团内部发展超10年,支撑服务了淘宝、支付宝、菜鸟、优酷、高德等业务中的大量核心应用,在成本、性能、稳定...

Hive读写HBase指南

HBase支持使用Hive读写数据,本文介绍如何配置Hive读写HBase。前提条件 将Hive 所在的Hadoop集群所有的节点的IP加入到云HBase白名单。获取云HBase的zookeeper访问地址,可在云HBase控制台查看。修改配置 进入hive配置目录/etc/ecm/hive-...

添加HBase数据源

HBase支持在LTS服务中添加Hbase数据源,本文介绍如何添加HBase数据源。前提条件 已创建LTS实例,请参见创建LTS实例。关联HBase数据源 登录HBase控制台。在集群列表页,单击BDS目标实例ID。在左侧导航栏选择数据源管理,单击添加数据源。在...

网络打通

本文主要介绍在使用Hbase的过程中如何打通连接不同的网络环境。源集群网络环境 目标集群网络环境 BDS服务是否支持 网络如何打通 VPC 相同VPC 是 BDS控制台关联HBase集群。VPC 不同的VPC 是 VPC之间需要建立一个高速通道 HBase集群添加BDS...

注意事项

写入HBase的数据是通过BDS同步过来(如主备同步,RDS的增量导入等),BDS有可能会加上写入时间戳。可以通过HBase Shell访问修改表的Mutability属性为MUTABLE_ALL来打开对自定义时间戳的支持。打开时间戳支持会有一些性能损耗,但通常不会...

Phoenix全增量迁移

本文主要介绍Phoenix全增量迁移的使用场景,功能列表,迁移优势,使用限制以及创建任务等操作。使用场景跨地域迁移:例如从青岛机房迁移到北京机房。集群升配:从4核8G迁移到8核16G集群。业务拆分:将部分业务迁移到新的集群。功能列表仅...

通过Hive访问HBase增强版

本文主要介绍如何通过Hive访问HBase增强版。HBase增强版支持Hive访问。但是Hive调用HBase的方式并非标准用法,而是直接调用了HBase内部类。因此无法采用直接加入alihbase-connector的JAR包的方式做兼容,需要替换hive/lib下已有的HBase jar...

实例节点规格

引擎类别 Master规格 Core规格 HBase标准版/Hbase增强版 4 核 8 GB(独享规格)hbase.sn1.large 8 核 16 GB(独享规格)hbase.sn1.2xlarge 8 核 32 GB(独享规格) hbase.sn2.2xlarge 16 核 32 GB(独享规格)hbase.sn1.4xlarge 16核 64 GB...

RDS全量导入

本文主要介绍在HBase中如何进行RDS全量导入。前提条件 已购买LTS数据迁移同步服务,配置LTS操作页面账户密码。已连接LTS和HBase迁移集群、RDS实例的网络。已添加HBase集群数据源或者Phoenix数据源。已添加RDS数据源。适用场景 HBase 自建...

使用DataWorks/DataX导入数据

HBase提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步,并且支持同步RDS、Loghub的实时数据到HBase,DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS...

访问HBase HDFS

在一些场景下,比如需要bulkload导入数据,需要打开HBase集群的HDFS端口。注意:hdfs端口打开后,因误操作hdfs导致的数据丢失等问题客户自身承担,客户需要对hdfs的操作比较了解 开通HDFS端口 首先联系云HBase答疑(钉钉号),开通HDFS 由于...

主备容灾

HBase通过master节点自动切换、数据两副本、快速自动failover等手段最大程度的保证了HBase实例服务和数据可用性,但是面对可用区级别的断电、断网及其他极端故障单个HBase集群无法满足用户的高可用要求,针对跨可用区灾备需求我们提供了...

ListInstanceServiceConfigurations

R[0.24,0.475]|E[0.8*{hbase#hbase-site.xml#hbase.regionserver.global.memstore.size}${hbase#hbase-site.xml#hbase.regionserver.global.memstore.lowerLimit}]|E[0.95*{hbase#hbase-site.xml#hbase.regionserver.global.memstore.size...

HBase版本选择

本文介绍HBase的各个版本信息以及指导用户如何选择。HBase标准版使用的是社区的开源HBase分支,并在此基础上定制部分能力,同时优化了稳定性和运维能力。这些能力主要来源包括:内部分支(增强版)的优化。开源新版本中的patch。测试及生产中...

使用限制

HBase增强版支持通过Java API访问进行访问,但目前在以下几方面的使用存在限制:不支持HBase的系统管理API HBase增强版不支持集群管理相关操作的接口,如assign region、stopRegionServer等等,用户对集群的日常管理,可以通过控制台和我们...

HBase Java SDK 下载

注意:目前已依赖社区版HBase客户端,无法升级到上述推荐的版本。HBase 1.x版本客户端对应1.x版本的HBase集群。HBase 2.x版本客户端对应2.x版本的HBase集群。HBase增强版用户推荐使用2.x版本客户端。HBase 1.x版本 ...

案例集合

阿里云HBase适合场景,本文收集和汇总了一些案例集合和资料供大家参考。HBase典型场景 HBase八大应用场景请参见再谈全局网HBase八大应用场景。存储场景 具体请参见云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见基于阿里云HBase...

应用场景

快速导入:通过BulkLoad将海量数据快速导入HBase,效率比传统方式提升一个数量级。高并发:水平扩展至千万级QPS。弹性:存储计算分离架构,支持独立伸缩,自动化扩容。广告场景:海量广告营销数据的实时存储 使用阿里云HBase存储广告营销中...

开通备份恢复

云数据库HBase增强版支持备份恢复功能,可以为您提供低成本快速恢复数据服务。本文介绍开通备份恢复功能。适用产品 云数据库HBase增强版。自建HBase集群。其他云HBase。功能和优势 实时增量同步,RPO小于30s,RPO越小表示系统对数据完整性...

使用HBase Shell访问

本文介绍如何通过HBase Shell工具访问云数据库HBase标准版。前提条件 通过内网连接时,请确认已购买与HBase标准版在相同专有网络VPC的ECS服务器,并将ECS服务器的IP地址在HBase中添加为白名单。若未购买ECS服务器,购买参考:如何创建ECS...

基本介绍

HBase标准版在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准版提供1.1版本和2.0版本供用户...

通过实时计算(Flink)访问HBase增强版

HBase增强版支持通过阿里云实时计算服务(Apache Flink)访问HBase。本文介绍通过Flink访问HBase增强版并创建结果表和维表。背景信息 您可以将HBase中的表当做Flink 中的维表或者结果表。具体的使用方法参见阿里云实时计算服务帮助中的创建...

环境搭建

HBase Ganos API基于Ali-Hbase Client客户工具包与GeoTools工具包对数据库进行交互操作,因此需要在maven中配置pom.xml文件导入相关工具包,具体如下: project.build.sourceEncoding>UTF-8 ...

注册ds

HBase Ganos REST接口中的DataStore(以下简称DS)记录了连接后端存储所需要的配置参数,包括映射在HBase的Catalog Name,以及连接HBase的zookeeper地址,其作用相当于配置信息的别名,用户在 HBase Ganos 中注册 DS的具体方式如下表:配置...

RelateDbForHBaseHa

HaStandby=hb-bp1bl7iqzka*&HaStandbyDBType=hbase&IsActiveStandard=true IsStandbyStandard=true&<公共请求参数>正常返回示例 XML格式 DC654531-0799-4502-AFA5-80EE1C16829A</RequestId>JSON格式 { RequestId":"DC654531-...

HBase SQL(Phoenix)5.x 使用说明

Phoenix 5.x 说明HBase SQL服务基于Phoenix 5.x为HBase 2.x提供SQL能力,通过轻客户端即可快速连接访问。SQL服务挂载了SLB负载均衡,通过round robin模式将请求均匀分发在每个query server节点。此外轻客户端还支持Python、Go等多语言访问...

使用HBase Shell

使用HBase Shell通过HBase Shell工具,你可以交互式地进行数据管理,包括建表、插入数据、删除数据和删除表等,本篇会介绍最基本的HBase Shell的使用命令,完整通过help命令查看帮助,更多内容请参考Apache HBase Shell介绍 如果使用的是...

HBase SQL(Phoenix)4.x 使用说明

Phoenix查询引擎支持使用SQL进行HBase数据的查询,会将SQL查询转换为一个或多个HBase API,协同处理器与自定义过滤器的实现,并编排执行。使用Phoenix进行简单查询,其性能量级是毫秒。更多的信息可以参考官网 Ali-Phoenix 说明 兼容开源...

常见问题

阿里云数据库HBase是基于HBaseHBase生态构建的低成本一站式数据处理平台,实现数据从处理、存储到分析全流程闭环,让客户用最低成本实现一站式数据处理。详情参看:产品概述 Q:相比自建HBase和EMR HBase的优势是什么 提供低成本,一站式...
< 1 2 3 4 ... 124 >
跳转至: GO

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折