云原生大数据计算服务 MaxCompute引擎的相关内容

文章 2018-12-13 来自：开发者社区

NLPIR-KGB知识图谱大数据语义挖掘新引擎

　　近些年，由于以社交网站、基于位置的服务LBS 等为代表的新型信息产生方式的涌现，以及云计算、移动和物联网技术的迅猛发展，无处不在的移动、无线传感器等设备无时不刻都在产生数据，数以亿计用户的互联网服务时时刻刻都在产生着数据交互，大数据时代已经到来。在当下，大数据炙手可热，不管是企业还是个人都在谈论或者从事大数据相关的话题与业务，我们创造大数据同时也被大数据时代包围。在大量的数据中找到有意义的模....

文章 2018-11-29 来自：开发者社区

国内云数仓排行独占一档，揭秘阿里云EB级大数据计算引擎MaxCompute

日前，全球权威咨询与服务机构Forrester发布了《The Forrester WaveTM: Cloud Data Warehouse, Q4 2018》报告。这是Forrester Wave首次发布关于云数仓解决方案（Cloud Data Warehouse，简称CDW）的测评。报告对云数仓的当前产品功能、产品路线和发展策略、市场表现等几个方面进行全面的评估，在产品能力排行榜中，阿里云力压....

文章 2018-11-14 来自：开发者社区

下一代大数据处理引擎，阿里云实时计算独享模式重磅发布

11月14日，阿里云重磅发布了实时计算独享模式，即用户独享一部分物理资源，这部分资源在网络/磁盘/CPU/内存等资源上跟其他用户完全独立，是实时计算在原有共享模式基础上的重大升级。（观看实时计算发布会直播：https://yq.aliyun.com/live/591）独享模式优点更加突出1、UDX开放：实时计算的共享模式是多个用户共享一个物理机群，在网络/磁盘层面没有办法做到完全隔离。因此，基....

文章 2018-11-14 来自：开发者社区

Spark比拼Flink：下一代大数据计算引擎之争，谁主沉浮？

下一代大数据计算引擎# 自从数据处理需求超过了传统数据库能有效处理的数据量之后，Hadoop 等各种基于 MapReduce 的海量数据处理系统应运而生。从 2004 年 Google 发表 MapReduce 论文开始，经过近 10 年的发展，基于 Hadoop 开源生态或者其它相应系统的海量数据处理已经成为业界的基本需求。但是，很多机构在开发自己的数据处理系统时都会发现需要面临一系列的问.....

文章 2018-10-15 来自：开发者社区

上：Spark VS Flink – 下一代大数据计算引擎之争，谁主沉浮？

导读：做大数据绝对躲不过的一个热门话题就是实时流计算，而提到实时流计算，就不得不提 Spark 和 Flink。Spark 从 2014 年左右开始迅速流行，刚推出时除了在某些场景比 Hadoop MapReduce 带来几十到上百倍的性能提升外，还提出了用一个统一的引擎支持批处理、流处理、交互式查询、机器学习等常见的数据处理场景。凭借高性能和全面的场景支持，Spark 早已成为众多大数据开发....

文章 2018-10-10 来自：开发者社区

这样的大学有点酷：当大数据为教育装上引擎

试想有这样一所大学，校领导可以通过一站式管理工具，随时了解各项核心业务；辅导员可以通过学生画像精准识别异常学生群体，从成绩退步、沉迷游戏到疑似不在校，都能及时进行干预；学生如果出现心理异常，也能及时得到关注；在教学中，教师和学生的短板会被预警并提出改进意见；通过对本科、研究生就业情况的解读和分析，学校可以有的放矢地对招生、教学、生源进行调整；为了更好地开展科研，从学校到教师层面的科研情况，学校全....

文章 2018-09-12 来自：开发者社区

大数据计算引擎，为什么阿里坚定地选择 Flink？| 直播预告

为什么玛雅人公元前就掌握了斗转星移的规律？为什么AlphaGo 4比1战胜围棋世界冠军？为什么城市大脑能有效预测城市运转的规律？科技文明的每次进步，都离不开计算的力量。随着技术的发展，AI 时代呼之欲出。这一切，无不对计算提出了更高要求：Faster,smarter,and more accurate。在时代的大背景下，阿里巴巴如何应对挑战？ 9月13日晚，锁定阿里技术直播，对话阿里实时....

文章 2018-09-04 来自：开发者社区

新一代大数据引擎操作系统：DataWorks V2.0重磅来袭

认识DataWorks：新一代大数据引擎操作系统众所周知，MaxComput与Blink分别是阿里巴巴自主研发的离线计算、实时计算大数据计算引擎，不仅拥有多项国家专利技术，而且多项关键指标已远超业内开源引擎平均能力，名副其实地成为了阿里巴巴大数据之路上的领航者。如果把阿里巴巴大数据计算引擎比作一台PC的CPU，GPU，SSD等硬件设备，那么DataWork就是这台大数据PC的Window操作....

文章 2018-05-29 来自：开发者社区

饿了么大数据计算引擎实践与应用

饿了么BDI-大数据平台研发团队目前共有20人左右，主要负责离线&实时Infra和平台工具开发。其中6人的离线团队需要维护大数据集群规模如下： Hadoop集群规模1300+ HDFS存量数据40+PB，Read 3.5 PB+/天，Write 500TB+/天 14W MR Job/天，10W Spark Job/天，25W Presto/天此外还需要维护Hadoop、Spark、H....

问答 2018-05-27 来自：开发者社区

云时代大数据管理引擎HAWQ++

演讲者在CCTC2017中国云计算技术大会上做了主题为《区块链技术的回顾与展望》的演讲，就HAWQ简介及发展历程，HAWQ++新特性，HAWQ++的使用做了深入分析。 https://yq.aliyun.com/download/333?spm=a2c4e.11154804.0.0.4b706a79vLEzX2