开源大数据平台E-MapReduce 上新啦一、EMR 新平台功能发布1、EMR 新平台新增 Terraform 管理能力适用客户：所有 EMR 发布地域用户发布功能：新增 Terraform Resource ：alicloud_emrv2_cluster。用户可以通过 Terraform 创建和管理 DataLake、OLAP、Dataflow、DataServing、Custom 等 EM....

文章 2022-02-17 来自：开发者社区

基于阿里云大数据平台开发大数据应用（三）：基于MaxCompute 的慕课网站数据仓库

一、需求分析网站访问日志是用户在访问网站服务器时产生的事件记录（log），通常记载着时间、日期、使用者及动作等相关操作的描述。在大数据时代，我们应当抓取并利用这些日志中有价值的信息，这样我们才能更好的了解网站的运行情况并做出相应的优化，甚至为公司营销策略提供依据。在本项目中，我们提取了网站访问日志中有价值的信息，如：用户IP、访问时间、请求链接、请求状态、来源链接、用户操作系统、浏览器等。对这些....

文章 2022-02-17 来自：开发者社区

基于阿里云大数据平台开发大数据应用（二）：MaxCompute 初体验

阿里云的MaxCompute是一种大数据数据仓库平台，一个综合性的数据服务平台。它不同于普通的mysql，oracle这样的关系型数据库，一大区别是它不能在毫秒级甚至秒级返回查询结果。一般来说，在MaxCompute平台上，一条MaxCompute命令的执行通常需要经过如下流程：当用户提交一个MaxCompute作业时:客户端提交一个SQL语句，发送 RESTful 请求给HTTP服务器HTTP....

文章 2022-02-17 来自：开发者社区

基于阿里云大数据平台开发大数据应用（一）：精挑细选，选定MaxCompute

由于工作需要，作者需要指导大学生开发一系列大数据应用。作者将这一过程记录下来，就形成了这个“基于阿里云大数据平台开发大数据应用”的系列文章。这篇文章是本系列文章的第一篇，主要介绍为什么选定阿里云MaxCompute平台作为项目开发的基础平台。当前，基于大数据开发新型的数据仓库系统已经是一个主流开发需求。从我们的需求出发，选择MaxCompute的理由可以总结为：高性能带来的高性价比，整个运行和生....

文章 2022-02-17 来自：开发者社区

阿里云机器学习PAI和大数据平台MaxCompute分别进入IDC和Forrester领导者象限

近日，全球权威研究机构Forrester、IDC分别发布《中国预测分析和机器学习Wave，2020Q4》和《Marketscape：中国大数据管理平台厂商评估，2020》报告，阿里云机器学习平台PAI和大数据平台MaxCompute分别位居领导者象限，且在战略维度上双双领先。 Forrester对中国市场预测分析和机器学习厂商从战略、产品和市场表现三个维度进行了全面评估，Forrester认为，....