开源大数据处理技术-圈子-云栖社区-阿里云
登录社区 云头条 博客 问答 聚能聊 直播 论坛 云栖大会 公众号 订阅NEW 云大学 更多 视频 活动 下载 专家 专题 商城 APP|大数据 阿里开源 ...分类:分布式系统与计算 storm hbase hadoop spark Hive 包括 ...
2016年杭州第四次spark meetup见闻
此次讲了阿里mllib从13年到16年的一些事情，比如：机器学习算法平台的建设（可以拖的图形化界面，把算法包装好），在mllib踩过的一些坑（基本是数据量大以后的事情），MPI跟mllib的对比（mpi性能高，灵活性稳定性...
IBM机器学习方案将Spark引入大型机平台
难道我们没有办法在进行公寓建设的同时，继续保留华尔道夫的传统酒店功能?答案是肯定的，至少从数据与分析角度来看完全可行。就在上周华尔道夫酒店宣布倒闭的同时，IBM公司恰好在那里举办了一项活动——讽刺的是，...
5W1H(六何分析法)全景洞察大数据
半自动化运维系统（建设了一部分）：帮助运维Hadoop平台，会监控Hadoop系统，出现状况后会报警，且有一些场景下会自动修复。专家系统（正在建设）：帮助优化Hadoop、spark作业。比如：小文件是否过多，map运行时间...
万事开头难！入门TensorFlow，这9个问题TF Boys 必须...
设计实现了金融、工业、互联网等多个领域的大数据平台建设和数据处理。下面，我们来看两位老师对入门 Tensorflow 的建议，以及他们的经验之谈。新手入门深度学习，选择 TensorFlow 有哪些益处？佟达：首先，对于新手...
用Apache Spark进行大数据处理—入门篇
MLlib&是一个可扩展的Spark机器学习库，由通用的学习算法和工具组成，包括二元分类、线性回归、聚类、协同过滤、梯度下降以及底层优化原语。Spark GraphX:GraphX&是用于图计算和并行图计算的新的(alpha)Spark API。...
《企业大数据系统构建实战：技术、架构、实施与应用》...
数据仓库架构师的主要责任有：数据仓库的架构设计及数据集市建设，带领团队落地及后续的运维，负责各条业务线的数据整合方案设计及日志规范，数据分析指标体系建设及元数据管理，并要稽查和监控数据质量，数据报表...
《机器人操作系统ROS原理与应用》——2.1 大数据组织...
数据仓库架构师的主要责任有：数据仓库的架构设计及数据集市建设，带领团队落地及后续的运维，负责各条业务线的数据整合方案设计及日志规范，数据分析指标体系建设及元数据管理，并要稽查和监控数据质量，数据报表...
《企业大数据系统构建实战：技术、架构、实施与应用》...
数据仓库架构师的主要责任有：数据仓库的架构设计及数据集市建设，带领团队落地及后续的运维，负责各条业务线的数据整合方案设计及日志规范，数据分析指标体系建设及元数据管理，并要稽查和监控数据质量，数据报表...
那些阿里人写过的书
注：本文资料整理自天猫，作者身份与职务来自出版社标注信息，...Streaming、图计算框架GraphX、机器学习库MLlib等内容。通过阅读这部分内容，读者可以扩展实际项目中对Spark的应用场景，让Spark焕发活力。天猫链接: ...
《Hadoop海量数据处理：技术详解与项目实战（第2版）...
大数据技术与云计算的发展密切相关，大型的云计算应用不可或缺的就是数据中心的建设，所以大数据技术是云计算技术的延伸。作为云计算PaaS层技术的代表，Hadoop可以以一种可靠、高效、可扩展的方式存储、管理“大数据...
窥探“大数据”全貌（技术篇、产业篇、企业转型篇）
建设数据管理平台：建设具备存储灾备功能的数据中心，以业务需要为引导，定做一套数据组织和管理的解决方案，硬件方面强调鲁棒性和可扩展性，没有必要一开始就投入大量经费。建立海量数据的深入分析挖掘能力：培养非...
创业必称“大数据”?是时候重新审视大数据的价值了
3.建设数据管理平台：建设具备存储灾备功能的数据中心，以业务需要为引导，定做一套数据组织和管理的解决方案，硬件方面强调鲁棒性和可扩展性，没有必要一开始就投入大量经费。4.建立海量数据的深入分析挖掘能力：...
从0到1构建数据生态系列(二)：拆解架构蓝图
并且，记住，你的老板是不懂技术的，他才不会管你的平台又建设到什么程度，集群又搭建了多少台，他只会问，这都一两个月了，你们数据怎么还没有给公司带来价值啊？(哈哈，有点黑BOSS的感觉了) 不过这肯定是现实，...
- 产品推荐
- 这些文档可能帮助您