数据HBase

面向大数据领域的一站式NoSQL服务,适用于GB至PB级的大规模吞吐、检索、分析工作负载,是为淘宝推荐、支付宝账单、花呗风控、监控、广告投放、物流轨迹、手淘消息等众多阿里巴巴核心服务提供支撑的数据

添加HBase数据

HBase支持在LTS服务中添加Hbase数据源,本文介绍如何添加HBase数据源。前提条件 已创建LTS实例,请参见创建LTS实例。关联HBase数据源 登录HBase控制台。在集群列表页,单击BDS目标实例ID。在左侧导航栏选择数据源管理,单击添加数据源。在...

创建同步任务

本文主要介绍如何在HBase中创建同步任务。前提条件 已成功购买LTS实例。...创建HBase数据迁移任务,详情请参见HBase不停机迁移。创建数据导入任务,详情请参见HBase数据导入。创建数据导出任务,详情请参见HBase数据导出。

数据导入与迁移

数据导入和增量同步 使用阿里云BDS数据同步服务可以将HBase增强版历史和增量数据迁移到阿里云HBase标准版或开源HBase,详见LTS服务。数据导入(历史数据迁移)开通LTS服务。在BDS中添加HBase集群和HBase增强版集群,具体操作方法参见添加...

数据导入Serverless实例

进行数据备份。备份完成后可以获取备份计划ID和备份记录ID。将备份的数据导入Serverless集群。在Serverless实例的控制台界面将SrcBDSInstanceID(即BDS ID,在BDS控制台界面获得),BackplanID(即刚才备份计划ID),BackupRecordID(即...

LTS(原BDS)服务介绍

数据备份;数据订阅 典型场景不停机迁移(HBase1.x、HBase2.x、HBase增强版、Phoenix4.x、Phoenix5.x)不停服数据迁移,同时搞定历史数据迁移、实时增量数据的同步。迁移过程中不会和源集群的HBase交互,只读取源集群的HDFS,尽可能减少对...

案例集合

存储场景 具体请参见云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见基于阿里云HBase构建车联网平台实践。HBase在新能源汽车监控系统中的应用场景请参见HBase在新能源汽车监控的应用。金融场景 具体请参见HBase在大搜车金融业务中...

日志服务(SLS)增量导入

已登录LTS操作页面,创建HBase数据源。已登录LTS操作页面, 创建Loghub数据源。HBase版本自建HBase1.x、2.x(未开启kerberos)。EMR HBase。标准版云HBase、增强版云HBase(集群版本,暂不支持单机版)。任务创建进入BDS操作页面,选择左侧...

产品优势

支持100TB+规模的数据备份至OSS,并提供与规模无关的RTO(分钟)、按需备份、指定时间点恢复等高级能力,详情参考HBase备份恢复-使用手册 不支持 全球多活 支持(待开放,有需要请联系)不支持 MTTR 深度优化,宕机恢复速度是开源HBase的10倍 ...

Hive读写HBase指南

HBase支持使用Hive读写数据,本文介绍如何配置Hive读写HBase。前提条件 将Hive 所在的Hadoop集群所有的节点的IP加入到云HBase白名单。获取云HBase的zookeeper访问地址,可在云HBase控制台查看。修改配置 进入hive配置目录/etc/ecm/hive-...

RDS全量同步和增量同步

添加HBase数据源请参见HBase数据源。添加HBase增强版请参见HBase增强版。单击编辑可以查看默认配置说明,也可以修改配置说明。具体语法请参见Jtwig语法说明。HBase API访问同步配置说明{"reader":{"querySql":["select*from dts.cluster ...

OpenApi-SDK参考

阿里云HBase OpenAPI支持以下类型的SDK:Alibaba Cloud SDK 云HBase数据库 SDK 说明文档 Alibaba Cloud SDK for Java Alibaba Cloud HBase SDK for Java 快速开始 Alibaba Cloud SDK for Python Alibaba Cloud HBase SDK for Python 快速...

开通备份恢复

设置自动备份HBase实例数据 登录HBase管理控制台。在顶部菜单栏的左上角,选择实例所属的地域。在集群列表页,单击目标实例ID。在左侧导航栏选择备份与恢复。单击备份设置。在弹出的对话框中,根据业务需求设置备份参数。配置 说明 备份表 ...

从云HBase标准版/自建开源HBase迁移到云HBase增强版...

备注:1)自动关联仅适用于LTS、HBase集群在同一VPC下的情况,如在不同的VPC下,需要通过手动操作来完成集群关联,详见:HBase数据源添加、HBase增强版数据源添加。2)对于社区版HBase也需要通过手动操作来完成集群关联。关联标准版集群...

通过Hive访问HBase增强版

hive如果HBase表已存在,可在Hive中HBase外表进行关联,外部表在删除时不影响HBase已创建表云Hbase中创建Hbase表,并put测试数据。hiveHive中创建HBase外部关联表,并查看数据。hive删除Hive表不影响HBase已存在表。hiveHive更多操作HBase...

云盘加密

云数据库HBase免费提供云盘加密功能,基于块存储对整个数据盘进行加密,即使数据备份泄露也无法被解密,保护您的数据安全。功能说明 云盘适用于数据安全或法规合规等场景,加密保护云数据库HBase上的数据。您无需自建与维护密钥管理基础...

全量导出MaxCompute

{"tableMode":"KVTable"}HBase数据导出到MaxCompute,支持两种模式:KV模式、宽表模式。KV模式入参:tablexxx {"tableMode":"KVTable"}结果输出:说明 每一行代表HBase中的一个KV。rowkey:HBase表KV的rowkey。version:KV的版本。op:KV的...

概述

本文主要介绍需要实时获取HBase表的数据变更场景。数据写入HBase之后,很多业务场景下需要实时获取(订阅)HBase表的数据变更:当数据被更新时,触发其他应用的业务处理,如物流订单生成后触发仓库作业。对接实时计算,用于业务数据驱动的...

使用DataWorks/DataX导入数据

HBase提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步,并且支持同步RDS、Loghub的实时数据HBase,DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS...

使用HBase Shell

查询表中的所有数据scan是一种访问HBase数据的方式,它非常的灵活,你可以用它来扫描全表,也可以用它查询固定范围。相应的它的速度会比查询单条的get略慢一些,这里因为我们的demo数据库数据并不多,所以我们全部取出来。hbase(main):006:...

使用HBase Shell访问

本文介绍如何通过HBase Shell工具访问云数据HBase标准版。前提条件 通过内网连接时,请确认已购买与HBase标准版在相同专有网络VPC的ECS服务器,并将ECS服务器的IP地址在HBase中添加为白名单。若未购买ECS服务器,购买参考:如何创建ECS...

HBase SQL(Phoenix)4.x 使用说明

Phoenix查询引擎支持使用SQL进行HBase数据的查询,会将SQL查询转换为一个或多个HBase API,协同处理器与自定义过滤器的实现,并编排执行。使用Phoenix进行简单查询,其性能量级是毫秒。更多的信息可以参考官网 Ali-Phoenix 说明 兼容开源...

HBase版本选择

HBase增强版是基于云原生多模数据库内核研发的、完全兼容HBase的云上托管数据库,已经在阿里集团内部发展10年多,支撑服务了淘宝、支付宝、菜鸟、优酷、高德等业务中的大量核心应用,在成本、性能、稳定性、功能、安全、易用性等方面相比...

快速开始

HBase中写入数据 写入数据参见HBase Java API 访问章节,这里使用Shell写入一条示例数据 hbase(main):008:0>put 'testTable','row1','f:name','foo' Took 0.1697 seconds Search实例中查询数据 在Search的WebUI中,选中刚才创建的索引...

增量归档MaxCompute

已添加HBase数据源。已添加MaxCompute数据源。支持版本自建HBase1.x、2.x。EMR HBase。标准版云HBase、增强版云HBase(集群版本)、Lindorm。限制实时数据归档基于HBase的日志,因此不能导出bulkload的数据。日志生命周期开启归档后,如果...

实例节点规格

引擎类别 Master规格 Core规格 HBase标准版/Hbase增强版 4 核 8 GB(独享规格)hbase.sn1.large 8 核 16 GB(独享规格)hbase.sn1.2xlarge 8 核 32 GB(独享规格) hbase.sn2.2xlarge 16 核 32 GB(独享规格)hbase.sn1.4xlarge 16核 64 GB...

全量数据索引构建

当配置好HBase表与Search索引的映射后,实时写入HBase中的数据将自动同步到Search索引中。对于HBase表中的存量历史数据,需要手工执行一次全量构建才可以完成数据同步。全量数据构建 在HBase Shell中执行build_external_index为HBase表中的...

网络打通

本文主要介绍在使用Hbase的过程中如何打通连接不同的网络环境。源集群网络环境 目标集群网络环境 BDS服务是否支持 网络如何打通 VPC 相同VPC 是 BDS控制台关联HBase集群。VPC 不同的VPC 是 VPC之间需要建立一个高速通道 HBase集群添加BDS...

常见问题

阿里云数据HBase是基于HBaseHBase生态构建的低成本一站式数据处理平台,实现数据从处理、存储到分析全流程闭环,让客户用最低成本实现一站式数据处理。详情参看:产品概述 Q:相比自建HBase和EMR HBase的优势是什么 提供低成本,一站式...

概述

本章主要介绍如何在数据库控制台购买HBase Serverless版集群,并通过网络连接集群,使您能够使用和管理集群。使用场景 首次使用云数据HBase Serverless版。流程简介 云数据HBase Serverless版的初始化操作流程如下图所示。购买集群:...

通过实时计算(Flink)访问HBase增强版

具体的使用方法参见阿里云实时计算服务帮助中的创建云数据HBase版结果表和创建云数据HBase版维表。注意事项 在使用HBase增强版的表作为Flink的维表或者结果表时,创建表的DDL语句需要使用连接地址。Flink访问HBase增强版使用的是Java ...

数据压缩与编码

本文主要介绍Hbase在数据压缩与编码中的实际应用。压缩算法目前阿里云平台支持压缩算法有:LZO、ZSTD、GZ、LZ4、SNAPPY NONE,其中NONE就代表不开启压缩。不同压缩算法在不同...'test'具体压缩编码的细节参见:阿里HBase数据压缩编码探索。

Serverless Shell访问

本文主要介绍如何使用HBase Serverless Shell工具访问云数据库Serverless版集群。前提条件 通过内网连接时,请确认已购买与HBase Serverless在相同专有网络VPC下的ECS服务器,若未购买ECS服务器,购买参考:如何创建ECS实例。操作步骤 下载...

产品概述

阿里云HBase是低成本、高扩展、云智能的大数据NoSQL,兼容标准HBase访问协议,提供低成本存储、高扩展吞吐、智能数据处理等核心优势,是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴核心...

注册ds

HBase Ganos REST接口中的DataStore(以下简称DS)记录了连接后端存储所需要的配置参数,包括映射在HBase的Catalog Name,以及连接HBase的zookeeper地址,其作用相当于配置信息的别名,用户在 HBase Ganos 中注册 DS的具体方式如下表:配置...

访问HBase HDFS

在一些场景下,比如需要bulkload导入数据,需要打开HBase集群的HDFS端口。注意:hdfs端口打开后,因误操作hdfs导致的数据丢失等问题客户自身承担,客户需要对hdfs的操作比较了解 开通HDFS端口 首先联系云HBase答疑(钉钉号),开通HDFS 由于...

基本介绍

HBase标准版在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准版提供1.1版本和2.0版本供用户...

HBase Java SDK 下载

注意:目前已依赖社区版HBase客户端,无法升级到上述推荐的版本。HBase 1.x版本客户端对应1.x版本的HBase集群。HBase 2.x版本客户端对应2.x版本的HBase集群。HBase增强版用户推荐使用2.x版本客户端。HBase 1.x版本 ...

容灾

HBase通过master节点自动切换、数据两副本、快速自动failover等手段最大程度的保证了HBase实例服务和数据可用性,但是面对可用区级别的断电、断网及其他极端故障单个HBase集群无法满足用户的高可用要求,针对跨可用区灾需求我们提供了...

RDS增量导入

单击创建通道,设置RDS数据源和目标数据源(HBase、Phoenix),输入需要迁移的表Mapping信息。单击创建同步通道。HBase表映射{ mapping":[{"columns":[{"name":"cf1:hhh","value":"{{ concat(title,id) }}"},{"name":"cf1:title","value":...
< 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
数据传输 数据库备份 云数据库 HBase 版 云服务器 物联网无线连接服务 SSL证书 对象存储 块存储
这些文档可能帮助您
主实例规格列表 如何连接RDS数据库 什么是数据传输服务DTS DBS计费概述 产品系列概述 配置备份计划

新品推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折

你可能感兴趣

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折