云数据库 HBase

面向大数据领域的一站式NoSQL服务,适用于GB至PB级的大规模吞吐、检索、分析工作负载,是为淘宝推荐、支付宝账单、花呗风控、监控、广告投放、物流轨迹、手淘消息等众多阿里巴巴核心服务提供支撑的数据库

网络打通

开放HDFSHBASE的端口。经典网络 VPC 是 需要创建VPC的 ClassicLink,经典网络的 ECS 需要绑定对应的 ClassicLink概述 HBase集群添加BDS集群访问白名单。开通集群的HDFS(仅云HBase需要)。经典网络 云HBase经典网络 否 需要临时购买几台...

访问HBase HDFS

core-site.xml<configuration><property><name>fs.defaultFS</name><value>hdfs:/hbase-cluster</value></property> hdfs-site.xml<configuration><property><name>dfs.nameservices hbase-cluster</value></property><property>...

阿里云高校特惠,助力学生创业梦!0元体验,快速入门云计算!

建个炫酷的简历网页,制作一个浪漫的表白网页,打造个人专属网盘,多种动手场景应用免费学!!!
广告

添加HBase数据源

可选值:HBase1x,HBase2x,HBase098和HBase094。说明 HBase1X表示HBase1x版本。HBase2x表示HBase2x版本。HBase098表示HBase098版本。HBase094表示HBase094版本。数据源参数"clusterKey":"xxxzkhost1,xxxzkhost2,xxxzkhost3:2181:/xxxhbase...

使用限制

HBase增强版支持通过Java API访问进行访问,但目前在以下几方面的使用存在限制:不支持HBase的系统管理API HBase增强版不支持集群管理相关操作的接口,如assign region、stopRegionServer等等,用户对集群的日常管理,可以通过控制台我们...

RelateDbForHBaseHa

目前支持HBase和HBaseue。IsActiveStandard Boolean 是 true 主实例是否为标准实例,标准实例为true。IsStandbyStandard Boolean 是 true 备实例是否为标准实例,标准实例为true。HaTables String 否 test,test1 HaMigrateType为TABLE级别...

QueryXpackRelateDB

要查询可关联数据库类型 spark可以关联hdfs,hbase,mongodb,mysql,polardb_mysql,redis,geomesa bds可以关联hbase,spark,hbaseue HasSingleNode Boolean 否 false 仅对bds查询关联hbase有效。true:会包含单节点HBase。false:不包含单节点...

HBase版本选择

在使用上,用户可以通过HBase官方客户端及标准API访问HBase增强版,HBase增强版同时兼容HBase-1.x和HBase-2.x客户端访问,在整体功能及API上保证近100%的兼容性。HBase性能增强版提供最高7倍于HBase开源版本的性能和一半的存储成本,详情请...

使用限制

自定义Filter指的是用户将自身实现的Filter类代码封装为jar,上传到HBase的类路径下或者HDFS中,并重启HBase或者动态加载,使之生效。HBase Serverless版不支持此使用方式。暂不支持Phoenix SQLSolr。目前HBase Serverless版暂不支持...

数据导入与迁移

HBase增强版支持从阿里云RDS,MySQL,不同HBase版本(含阿里云HBase和自建HBase集群)导入数据,并进行实时的增量同步,也支持将数据迁移到不同版本的HBase中。数据的导入和迁移,都是基于LTS服务实现。RDS增量数据同步 通过BDS数据同步...

WebUI页面访问

当您新建一个集群后,我们提供了一种快捷的方式来让你访问集群上的开源组件,如HBase、Ganglia和HDFS,以及HBase增强版的ClusterManager等。操作方式 登录HBase管理控制台,并选择目标实例,单击管理。在集群详情tab中,最上方的开源软件栏...

小版本升级

阿里云云HBase组,在不断fix线上bug及改进性能,小版本升级是保证完全兼容的。一些严重的bug,我们会邮件通知,请关注我们的邮件。为了不影响客户的业务,我们不会主动升级客户的集群,我们建议客户在业务低峰期自主升级小版本。我们当前不...

使用DataWorks/DataX导入数据

修改插件配置,读写HBase分别使用HBase Writer和HBase Reader插件。相关的配置可以参考具体插件的帮助。但是HBase增强版"hbaseconfig"部分不再使用Zookeeper.quorum这个参数连接,而是使用增强版特有的endpoint形式,配置示例如下:...

设置白名单安全组

通过ECS安全组设置HBase白名单时,要求ECS实例和HBase集群的网络类型相同(专有网络要求属于同一个VPC ID)。背景信息 为了数据库的安全,新创建的集群被默认设置为无法访问,包括以下两部分 对集群上开源组件的访问,HBase,Ganglia和HDFS...

访问准备

若能够选择和HBase相同的可用区,如可用区e,那么直接购买,并在选择VPC的时候选择和HBase相同的VPC和vswitch。b. 若不在同一个可用区,则按照上一步的选择的可用区,比如可用区b创建ECS,并在选择VPC的时候,选择之前创建的VPCmyvpc和...

LTS(原BDS)服务介绍

LTS(原BDS)是面向云HBase业务场景特点深度定制的数据生态服务。支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向云HBase的一站式数据生态服务。核心...

Hive读写HBase指南

Hive时,操作步骤跟EMR操作类似,需要注意的是自建Hive的hbase-site.xml部分配置项可能与云HBase不一致,简单来说网络端口开放后,只保留hbase.zookeeper.quorum即可与云Hbase进行关联。相关资源 Hive更多操作HBase步骤,可参考官方文档...

增量归档OSS/HDFS

已打通BDS到HBase和HDFS集群(OSS)的网络。登录BDS操作页面已创建HBase、HDFS和OSS数据源。支持版本 HBase 自建HBase1.x、2.x(未开启kerberos)。MR HBase 标准版云HBase、增强版云HBase(集群版本,暂不支持单机版)。HDFS HDFS 2.x OSS...

HBase冷存储(即将下线)

HBase增强版内置一体化冷热分离功能,在一张表内全透明实现数据的冷热分离,无需区分“热表”,“冷表”,业务0改造便可获得极致成本,如果有冷热分离需求,请移步HBase增强版的帮助文档冷存储冷热分离章节。冷数据是大数据存储当中常见...

主备容灾

HBase通过master节点自动切换、数据两副本、快速自动failover等手段最大程度的保证了HBase实例服务数据可用性,但是面对可用区级别的断电、断网及其他极端故障单个HBase集群无法满足用户的高可用要求,针对跨可用区灾备需求我们提供了...

通过Hive访问HBase增强版

本文主要介绍如何通过Hive访问HBase增强版。HBase增强版支持Hive访问。但是Hive调用HBase的方式并非标准用法,而是直接调用了HBase内部类。因此无法采用直接加入alihbase-connector的JAR包的方式做兼容,需要替换hive/lib下已有的HBase jar...

Phoenix数据源

本文介绍如何添加Phoenix数据源。使用场景 云HBase Phoenix集群(Phoenix4.x,Phoenix 5.x)。自建HBase集群。EMR HBase集群。操作步骤 进入LTS页面,...hbaseDir:HBaseHDFS上的根路径。hdfsUrl:NameNode节点、NameNode端口。单击“添加”。

XpackRelateDB

hbase 需要关联的数据库类型 spark可以关联以下数据库:hdfs hbase mongodb mysql polardb_mysql redis geomesa 返回数据 名称 类型 示例值 描述 RequestId String 50373857-C47B-4B64-9332-D0B5280B59EA 请求ID 示例 请求示例 http(s):/...

注意事项

实例使用前请设置好磁盘空间报警,建议安全水位为80%,超过80%建议用户进行存储空间扩容,...开源HBCK通过对比meta表和HDFS上meta文件对集群状态进行检查,但是云HBase不开放HDFS端口,如果使用开源HBCK工具会造成实例meta信息异常实例不可用。

实例节点规格

根据所选引擎的不同,选择如下所属的MasterCore规格信息。引擎类别 Master规格 Core规格 HBase标准版/Hbase增强版 4 核 8 GB(独享规格)hbase.sn1.large 8 核 16 GB(独享规格)hbase.sn1.2xlarge 8 核 32 GB(独享规格) hbase.sn2.2...

ListInstanceServiceConfigurations

R[0.24,0.475]|E[0.8*{hbase#hbase-site.xml#hbase.regionserver.global.memstore.size}${hbase#hbase-site.xml#hbase.regionserver.global.memstore.lowerLimit}]|E[0.95*{hbase#hbase-site.xml#hbase.regionserver.global.memstore.size...

从云HBase标准版/自建开源HBase迁移到云HBase增强版...

在使用上,用户可以通过HBase官方客户端及标准API访问HBase增强版,HBase增强版同时兼容HBase-1.x和HBase-2.x客户端访问,在整体功能及API上保证近100%的兼容性。云HBase增强版提供最高7倍于HBase开源版本的性能和一半的存储成本,详情请...

全增量数据同步

迁移过程中不会和源集群的HBASE交互,只读取源集群的HDFS,尽可能减少对源集群在线业务的影响。文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量高效性。单个节点迁移速度可达到150MB/s,节点数支持水平扩展,能够满足支持TB...

HBase SQL(Phoenix)4.x 使用说明

准备一个内网的ECS,需要和HBase处在同一个网络内。例如HBase是在经典网络的,那么就准备一个经典网络的ECS,如果HBase是在VPC的,那么就在需要在同一个VPC内的ECS 按照下载地址下载 Phoenix 客户端 在这台ECS上下载HBase对应版本的Phoenix...

通过实时计算(Flink)访问HBase增强版

云HBase增强版支持阿里云实时计算服务(Apache Flink)访问。...如果使用独立的Flink集群,请确保FLink集群和HBase集群在同一个VPC下。否则只能用公网访问地址链接HBase,无论是哪种链接方式,都需要确保FLink的机器的IP加到HBase白名单中。

案例集合

阿里云HBase适合场景,本文收集一些案例集合参考资料供大家参考。HBase典型场景 HBase八大应用场景请参见再谈全局网HBase八大应用场景。存储场景 具体请参见云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见基于阿里云HBase构建...

HBase Java SDK 下载

注意:目前已依赖社区版HBase客户端,无法升级到上述推荐的版本。HBase 1.x版本客户端对应1.x版本的HBase集群。HBase 2.x版本客户端对应2.x版本的HBase集群。HBase增强版用户推荐使用2.x版本客户端。HBase 1.x版本 ...

HBase SQL(Phoenix)5.x 使用说明

客户端准备 准备一台ECS,需要和HBase处在同一个网络内,建议是同一个vpc内部的ECS实例,否则需要打通网络,或者使用外网地址连接。查看这台ECS的内网IP hostname-i 然后把他加到HBase的网络白名单中。加入的方法请参考HBase白名单控制。...

基本介绍

HBase标准版在开源HBase的基础上,做了大量的改进、稳定性优化运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性可运维能力,同时100%兼容开源社区HBase。目前云HBase标准版提供1.1版本2.0版本供用户...

数据导入Serverless实例

注意事项仅支持HBase1.x以上版本数据导入(包括自建HBase和云HBase)。Serverless实例空间不足会导致数据导入中断。原始集群的表大小是压缩后的大小,而Serverless实例空间计费是按照KV原始大小计算,请注意预留足够空间。关于空间计费请...

使用HBase Shell访问

本文介绍如何通过HBase Shell工具访问云数据库HBase标准版。前提条件 通过内网连接时,请确认已购买与HBase标准版在相同专有网络VPC的ECS服务器,并将ECS服务器的IP地址在HBase中添加为白名单。若未购买ECS服务器,购买参考:如何创建ECS...

RDS增量导入

已打通BDS和HBase迁移集群的网络。已添加HBase集群数据源。开通DTS订阅服务,添加DTS数据源。适用版本 自建HBase1.x、2.x EMR HBase 标准版云HBase、增强版云HBase(单机版本、集群版本)云HBase Phoenix 任务创建 登录BDS操作页面,任务管理...

产品优势

产品化深度集成,支持Spark SQL分析HBaseHBase数据到Spark(HDFS/OSS)的增量归档,离线分析结果回流到HBase等。无优化,数据集成需要较大开发 MaxCompute 产品化集成,支持全量导出MaxCompute 数据集成需要较大开发 日志服务(SLS) 通过LTS...

schema设计原则

单个cell不超过10MB,如果超过10MB,请使用mob,若再大可以直接存在HDFS中,在HBase内存储HDFS地址。列簇数量不建议过多,一般1个即可,不建议超过3个。列簇名应尽量简短,因为存储时每个value都包含列簇名(忽略前缀编码,prefix encoding...

常见问题

Q:相比自建HBase和EMR HBase的优势是什么 提供低成本,一站式的能力,详细对比参看:优势对比 Q:线下或者ECS上自建CDH/HDP怎么搬迁到云HBase HBase提供搬迁不停机搬迁服务,可以在不影响业务的情况下实现数据搬迁。hive,MR等组件可以两种...
< 1 2 3 4 ... 28 >
共有28页 跳转至: GO

新品推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折

你可能感兴趣

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化

热门推荐

切换为移动版

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折