文章 2016-09-11 来自:开发者社区

E-MapReduce集群搭建HAWQ实践

HAWQ是一种基于HDFS的MPP(Massively Parallel Processing) SQL引擎,支持标准SQL/事务处理,性能比原生Hive快几百倍。 本文介绍在E-MapReduce集群上面如何搭建HAWQ。 零、 部署模式 HAWQ有多种部署模式 非HA standalone yarn HA standalone yarn 本文以HA-yarn模式为例,...

文章 2016-08-17 来自:开发者社区

E-MapReduce 集群环境小记

以EMR-2.0.1为例,对E-MapReduce的集群环境做个总结介绍 E-MapReduce环境变量 登录集群,输入env 命令即可看到环境变量。跟hadoop相关的如下 JAVA_HOME=/usr/lib/jvm/java HADOOP_HOME=/usr/lib/hadoop-current HADOOP_CLASSPATH=/usr/lib/hbase-current/li...

文章 2016-06-28 来自:开发者社区

E-MapReduce的HBase集群使用Hue

E-MapReduce产品的emr-2.0.0以下的版本创建的HBase集群,实现Hue访问HBase步骤如下: 1. 启动HBase thrift(emr集群的master节点) >su -l hdfs -c '/opt/apps/hbase-1.1.1/bin/hbase thrift start >/dev/null 2>&1 &' 2.安装Hue(本地.....

E-MapReduce的HBase集群使用Hue
文章 2016-06-28 来自:开发者社区

E-MapReduce集群使用Oozie工作流简单示例

本文简单介绍了E-MapReduce集群上的Oozie工作流的使用,并且提供了可以直接使用的示例代码。全文使用Zeppelin notebook演示。欢迎下载导入[notebook.json],直接就能在zepplein上运行。或者在ZeppelinHub Viewer页面上浏览:[ZeppelinHub Viewer].

E-MapReduce集群使用Oozie工作流简单示例
文章 2016-06-27 来自:开发者社区

E-MapReduce集群支持预装Phoenix

E-MapReduce在emr-2.0.0版本开始,在集群中会集成进phoenix-4.7.0,用户在创建集群的软件列表中需要勾选HBase,集群创建后即可使用phoenix。 创建集群 Phoenix使用HBase作为底层存储,所以创建集群时需要勾选HBase软件,如下: 集群空闲后,可以从集群的详情页面查看Zookeeper节点,如下: phoenix使用上面Zookeeper节点进行相...

E-MapReduce集群支持预装Phoenix
文章 2016-06-13 来自:开发者社区

E-MapReduce集群如何使用Phoenix on HBase

        E-MapReduce的emr-2.0.0以下的HBase集群中并不包含Phoenix,也没有启动yarn,下面介绍一种通过创建集群时设置的引导操作来完成集群上Phoenix的部署。 HBase+Phoenix部署 HBase+Yarn+Phoenix部署 HBase+Phoenix部署 1.引导操作s...

E-MapReduce集群如何使用Phoenix on HBase
问答 2016-06-06 来自:开发者社区

E-mapreduce 所部署集群的每一台机器,是否是有不同的外网ip地址?

E-mapreduce 所部署集群的每一台机器,是否是有不同的外网ip地址?我想做一些抓取工作,所以咨询下这个问题

问答 2016-05-31 来自:开发者社区

关于eclipse中运行mapreduce不是在hadoop集群环境运行而是在本地运行的问题

1.我用eclipse远程连接linux上的hadoop集群,跑Mapreduce程序都可以顺利完成,结果在集群里也可以看得到。 但是,跑程序的时候,我去集群上Jps没有我正在跑的程序 而且,我到job的web界面下,也没有我的MapReduce任务记录。。。 是不是eclipse其实在本地跑的,没有在集群中跑,我无法想明白

文章 2016-05-27 来自:开发者社区

使用E-MapReduce集群sqoop组件同步云外Oracle数据库数据到集群hive

E-MapReduce集群sqoop组件可以同步数据库的数据到集群里,不同的数据库源网络配置有一些差异网络配置。最常用的场景是从rds mysql同步数据,最近也有用户询问如何同步云外专有Oracle数据库数据到hive。云外专有数据库需要集群所有节点通过公网访问,要创建VPC网络,使用VPC网络创建集群,给集群各节点绑定动态ip,检查网络链路,Oracle数据库还上传oracle jdbc j....

使用E-MapReduce集群sqoop组件同步云外Oracle数据库数据到集群hive
问答 2016-05-27 来自:开发者社区

用E-MapReduce sqoop同步私有公网数据库为什么要创建VPC集群

用E-MapReduce sqoop同步私有公网数据库为什么要创建VPC集群,不能用经典网络呢

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐