详解:从Greenplum、Hadoop到现在的阿里大数据技术

;第二条路是因为担心 Greenplum不靠谱,我们也使用 Hadoop做类似的事情。第三件事情,就是启动了飞天操作系统的研发,目标是打造一个属于自己的大数据平台。中间的历程非常坎坷,到2010年的时候, Greenplum这条路因为规模和可用性的问题以及计算准确性 ...
来自: 开发者社区 > 博客 作者: 云学习小组 浏览:5819 回复:0

基于Greenplum Hadoop 分布式平台的大数据解决方案

问题导读: 1、什么是 Greenplum? 2、如何理解 Greenplum的架构? 3、 Greenplum架构中Master Host、Segment、Interconnect分别是什么? 1_ Greenplum架构1.png (42.55 KB, 下载次数: 5) 下载附件  保存到相册 2015-4-3 23:18 上传 ...
来自: 开发者社区 > 论坛 作者: 紫乌乌 浏览:195 回复:0

《Hadoop实战手册》一1.10 在Greenplum外部表中使用HDFS

社区“异步社区”公众号查看。###1.10 在 Greenplum外部表中使用HDFS Greenplum是一个并行数据库,数据的存储与查询基于一个或多个PostgreSQL实例。它 补充Hadoop,提供对大数据的实时或准实时 ...
来自: 开发者社区 > 博客 作者: 异步社区 浏览:287 回复:0
推荐

阿里云高校特惠,助力学生创业梦!0元体验,快速入门云计算!

建个炫酷的简历网页,制作一个浪漫的表白网页,打造个人专属网盘,多种动手场景应用免费学!!!
广告

EMC升级Greenplum 4.2 实现Hadoop处理

本文讲的是EMC升级 Greenplum 4.2 实现 Hadoop处理,大数据的问题不仅是因为它很大,还因为它一直在膨胀。比起传统的数据仓库,它需要更现代的 Hadoop MapReduce 数据处理。EMC最近更新了自己的 Greenplum数据库,使其能够 ...
来自: 开发者社区 > 博客 作者: 燕儿199606 浏览:130 回复:0

从Greenplum、Hadoop到现在的阿里大数据技术

Hadoop做类似的事情。第三件事情,就是启动了飞天操作系统的研发,目标是打造一个属于自己的大数据平台。中间的历程非常坎坷,到2010年的时候, Greenplum这条路因为规模和可用性的问题以及计算准确性问题被放弃,2013年的时候, Hadoop平台也因为数据中心 ...
来自: 开发者社区 > 博客 作者: 沉默术士 浏览:220 回复:0

PivotalR between R & PostgreSQL-like Databases(for exp : Greenplum, hadoop access by hawq)

PivotalR是R的一个包, 这个包提供了将R翻译成SQL语句的能力, 即对大数据进行挖掘的话. 用户将大数据存储在数据库中, 例如PostgreSQL , Greenplum.&用户在R中使用R的语法即可, 不需要直接访问数据库, 因为 ...
来自: 开发者社区 > 博客 作者: 德哥 浏览:1248 回复:0

请问有人用过greenplum+hadoop的架构吗?

请问如何将oracle的数据导入 greenplum中,到处csv文件再导入的方式太慢了,数据量很大。 或者换个思路能否从hdfs上将数据导入gp?查了一下貌似只有gp的外部表可以用,但是外部表的性能肯定不理想。 ...
来自: 开发者社区 > 论坛 作者: 焦普鸥 浏览:181 回复:4

自建Greenplum迁移到AnalyticDB for PostgreSQL - 云原生数仓 AnalyticDB PostgreSQL

PostgreSQL完全兼容开源 Greenplum,支持应用平滑 。本文主要描述如何从自建 Greenplum迁移到阿里云ADBPG 数仓平台 ...

商标订单补充申请人 - 阿里云商标服务

在进行商标注册申请时,如您跳过商标注册申请人的填写,您需在商标注册申请提交成功后在阿里云商标服务控制台 补充申请人信息,否则您的商标注册订单将不会进入阿里云初审。本文将为您介绍在控制台 补充 ...

公告:补充负载均衡实例购买、变配、续费事件 - 操作审计

审计即将 补充发布负载均衡(Server Load Balancer)实例的购买、变配和续费事件。此前由于阿里云售卖实现路径有多种,部分售卖事件未能被跟踪记录。本次发布将 补充负载均衡实例的事件,后续会陆续 补充其他产品的事件 ...

《Greenplum企业应用实战》一第1章 Greenplum简介1.1 Greenplum的起源和发展历程

企业。针对数据密集型计算中的海量数据处理这一问题,研究者开始考虑如何利用大规模集群系统所具有的可伸缩性和容错性的优势,实现高效的数据管理功能。比较典型的解决方案有Teradata、 GreenplumHadoop Hive、Oracle Exadata ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:191 回复:0

《Greenplum企业应用实战》一第2章 Greenplum快速入门2.1 软件安装及数据库初始化

:```javascript[gpadmin@inc-dw- hadoop-151-7 ~]$ gpstart --helpCOMMAND NAME: gpstartStarts a Greenplum Database system ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:331 回复:0

《Greenplum企业应用实战》一1.4 Greenplum特性及应用场景

机器并行计算,极大地提高了对海量数据的处理能力。采取MPP架构的数据库系统才能对海量数据进行管理。(2)高性价比 Greenplum数据库可以搭建在业界各种开放式硬件平台上,在硬件选型上有很强的自由性。相比其他封闭式数据仓库专用系统及 Hadoop ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:297 回复:0

《Greenplum企业应用实战》一2.2 安装Greenplum的常见问题

本节书摘来自华章出版社《 Greenplum企业应用实战》一书中的第2章,第2.2节,作者 何勇 陈晓峰,更多章节内容可以访问云栖社区“华章计算机”公众号查看###2.2 安装 Greenplum的常见问题安装 ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:397 回复:0

《Greenplum企业应用实战》一2.3 畅游Greenplum

本节书摘来自华章出版社《 Greenplum企业应用实战》一书中的第2章,第2.3节,作者 何勇 陈晓峰,更多章节内容可以访问云栖社区“华章计算机”公众号查看###2.3 畅游 Greenplum本节只介绍一些常用的 ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:436 回复:0

《Greenplum企业应用实战》一1.3 PostgreSQL与Greenplum的关系

本节书摘来自华章出版社《 Greenplum企业应用实战》一书中的第1章,第1.3节,作者 何勇 陈晓峰,更多章节内容可以访问云栖社区“华章计算机”公众号查看###1.3 PostgreSQL与 Greenplum的关系 ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:410 回复:0

专访Pivotal公司Greenplum研发总监姚延栋:Greenplum开源的这一年

(2014年独立为Pivotal),现担任 Pivotal 数据部门研发总监,代领中国研发团队,负责分布式数据库 Greenplum Database 和& SQL-on- Hadoop 产品HAWQ 的研发工作。 Greenplum 5.0 ...
来自: 开发者社区 > 博客 作者: 云学习小组 浏览:2541 回复:0

《Greenplum企业应用实战》一第3章 Greenplum实战3.1 历史拉链表

本节书摘来自华章出版社《 Greenplum企业应用实战》一书中的第3章,第3.1节,作者 何勇 陈晓峰,更多章节内容可以访问云栖社区“华章计算机”公众号查看##第3章 Greenplum实战从本章开始我们结合实际 ...
来自: 开发者社区 > 博客 作者: 华章计算机 浏览:463 回复:0

问题请教,ASCP模块下的来源补充规则跟PO下的来源补充规则有什么不同

各位高手,在R12中,ASCP模块下的来源 补充规则跟PO下的来源 补充规则有什么不同呢?这两个功能界面一样,但后台table却不是一样的,为什么两个模块都有呢?奇怪? 模块, table ...
来自: 开发者社区 > 论坛 作者: 十字星裙 浏览:394 回复:1

13.Django之数据库models&orm连表操作补充以及其他知识点补充(二)

.user_set.filter(username='admin'))3.关于django orm的一些 补充说明。#!返回单条记录的时候,返回的是一个和表同名的对象!##!在返回多条记录时,一定会返回一个 ...
来自: 开发者社区 > 博客 作者: 技术小胖子 浏览:15 回复:0

通过HDP 2.6 Hadoop读取和写入OSS数据 - 对象存储 OSS

Platform) 是由Hortonworks发行的大数据平台,包含了 Hadoop、Hive、HBase等开源组件。HDP最新版本3.0.1中的 Hadoop 3.1.1版本已经支持OSS,但是低版本的HDP不支持OSS。本文以 ...

Hadoop - 云原生数据湖分析 DLA

本文主要介绍如何使用DLA Spark访问用户VPC中的 HADOOP集群(开启kerberos认证的集群暂不支持 ...

通过DataWorks将Hadoop数据同步至Elasticsearch - 阿里云Elasticsearch

当您基于 Hadoop进行交互式大数据分析查询,遇到查询延迟的问题时,可以将数据同步至阿里云Elasticsearch中再进行查询分析 ...

Hadoop Streaming - E-MapReduce

本章节介绍如何使用 Python 写 Hadoop ...

Hadoop数据迁移MaxCompute最佳实践 - DataWorks

DataWorks数据同步功能,迁移HDFS数据至MaxCompute,或从MaxCompute迁移数据至HDFS。无论您使用 Hadoop还是Spark,均可以与MaxCompute进行双向同步 ...

Hadoop数据迁移MaxCompute最佳实践 - MaxCompute

DataWorks数据同步功能,迁移HDFS数据至MaxCompute,或从MaxCompute迁移数据至HDFS。无论您使用 Hadoop还是Spark,均可以与MaxCompute进行双向同步 ...

Hadoop MapReduce作业配置 - E-MapReduce

本文介绍如何配置 Hadoop MapReduce类型的作业。 前提条件 已创建好项目,详情请参见 项目管理。 操作步骤 ...

Hadoop环境安全加固 - 安全公告和技术

Hadoop 介绍 Hadoop 是一个由 Apache 基金会所开发的一个开源、高可靠、可扩展的分布式计算框架。 Hadoop 的框架最核心的设计就是 HDFS 和 MapReduce 模块。HDFS 为海量的数据提供了存储,MapReduce 则为海量 ...

【漏洞公告】CVE-2017-15718:Apache Hadoop YARN NodeManager信息泄露漏洞 - 安全公告和技术

Apache Hadoop YARN NodeManager 存在CVE编号为CVE-2017-15718的信息泄露漏洞。攻击者可能利用该漏洞获得应用密码,受影响的Apache Hadoop版本有 2.7.3及2.7.4。该漏洞是由于CVE-2016 ...

通过ES-Hadoop将HDFS中的数据写入Elasticsearch - 阿里云Elasticsearch

ES- Hadoop是Elasticsearch推出的专门用于对接 Hadoop生态的工具,可以让数据在Elasticsearch和 ...

通过CDH5 Hadoop读取和写入OSS数据 - 对象存储 OSS

Distribution, including Apache Hadoop)是众多 Hadoop 发行版本中的一种,最新版本 CDH6.0.1 中的 Hadoop3.0.0 版本已经支持 OSS。CDH5 中的 Hadoop2.6 ...

通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据 - 阿里云Elasticsearch

ES- Hadoop是Elasticsearch推出的专门用于对接 Hadoop生态的工具,可以让数据在Elasticsearch和 ...

【漏洞公告】CVE-2017-7669:Apache Hadoop远程权限提升漏洞 - 安全公告和技术

Apache Hadoop是支持数据密集型分布式应用,并以Apache 2.0许可协议发布的软件框架。近期,国外安全研究人员发现,在Apache Hadoop 2.8.0版本、3.0.0-alpha1版本和3.0.0-alpha2版本中存在安全漏洞,该 ...

通过ES-Hadoop实现Spark读写阿里云Elasticsearch数据 - 阿里云Elasticsearch

Spark是一种通用的大数据计算框架,拥有 Hadoop MapReduce所具有的计算优点,能够通过内存缓存数据为大型数据集提供快速的 ...

【漏洞公告】Hadoop YARN 资源管理系统 REST API未授权访问 - 安全公告和技术

Hadoop是一款由Apache基金会推出的分布式系统框架,它通过著名的 MapReduce 算法进行分布式处理,Yarn是 Hadoop集群的资源管理系统。 Hadoop YARN 资源管理系统配置不当导致可以未经授权进行访问,从而被攻击者恶意利用。攻击 ...

迁移Hadoop文件系统数据至JindoFS - E-MapReduce

本文以OSS为例,介绍如何将 Hadoop文件系统上 ...

Hadoop生态外表联邦分析 - 云原生数仓 AnalyticDB PostgreSQL

云原生数据仓库 AnalyticDB PostgreSQL (简称 ADB PG)支持访问 Hadoop 生态的外部数据源 ...
< 1 2 3 4 ... 469 >
共有469页 跳转至: GO

新品推荐

你可能感兴趣

热门推荐

企典文档内容 商标申请信息 商标注册信息 云计算服务器排行榜 大数据产品榜单