文章 2024-11-26 来自:开发者社区

恭喜小红书!业界最大数据湖0故障迁上阿里云

最近,小红书技术团队完成了一件前所未有的壮举: 一年内,把业界最大数据湖0故障迁上阿里云。 壮举的背后意味着风险和挑战。 作为中国头部互联网公司之一,小红书月活用户已过3亿,其数据湖存储了过去11年的所有原始数据,包括结构化、半结构化和非结构化数据。近年来,随着业务的高速增长,小红书在...

恭喜小红书!业界最大数据湖0故障迁上阿里云
文章 2024-08-26 来自:开发者社区

数据湖的未来已来:EMR DeltaLake携手阿里云DLF,重塑企业级数据处理格局

在大数据处理领域,阿里云EMR(Elastic MapReduce)和DeltaLake的集成已经为用户带来了显著的数据处理优势。而阿里云数据湖格式(Data Lake Formation,简称DLF)作为一站式数据湖管理服务,其与EMR DeltaLake的深度集成更是为企业级数据湖解决方案提供了...

问答 2024-06-22 来自:开发者社区

阿里云EMR新版数据湖Datalake有哪些主要特性?

阿里云EMR新版数据湖Datalake有哪些主要特性?

问答 2024-06-07 来自:开发者社区

OSS数据湖阿里云生态支持

OSS数据湖阿里云生态支持

问答 2024-05-29 来自:开发者社区

阿里云E-MapReduce数据湖分析和存算分离都支持湖上建仓和仓下沉到湖么?

阿里云E-MapReduce数据湖分析和存算分离都支持湖上建仓和仓下沉到湖么?

问答 2024-05-29 来自:开发者社区

阿里云E-MapReduce用存算分离模式是不是也可以进行数据湖分析?

阿里云E-MapReduce数据湖分析模式 抛开兼容trino/presto语法这一点,是不是跟存算分离一样?换句话说我用存算分离模式是不是也可以进行数据湖分析?

问答 2024-05-29 来自:开发者社区

阿里云E-MapReduce 数据湖分析版和存算分离版有什么区别?

阿里云E-MapReduce 数据湖分析版和存算分离版有什么区别?

文章 2024-05-26 来自:开发者社区

【阿里云云原生专栏】云原生下的数据湖建设:阿里云MaxCompute与DataWorks解决方案

在数字化时代背景下,数据已成为企业创新和竞争力提升的关键资源。随着云计算技术的成熟和云原生架构的普及,越来越多的企业开始探索如何高效、灵活地管理和分析海量数据。数据湖作为一种支持原始数据存储和分析的架构,正逐渐成为企业数据资产管理的优选方案。本文将探讨如何在云原生环境下利用阿里云MaxCompute和DataWorks构建高效、可扩展的数据湖解决方案。 ...

文章 2024-05-08 来自:开发者社区

阿里云EMR数据湖文件系统: 面向开源和云打造下一代 HDFS

前言 最近,阿里云EMR重磅推出新版数据湖Datalake,100%兼容社区大数据开源组件,具备极强的弹性能力,支持数据湖构建DLF、对象存储OSS和OSS-HDFS,支持 Delta Lake、Hudi、Iceberg 三种湖格式。结合阿里云DataWorks,可以为用户提供从入湖、建模、开发、调度、治理、安全等全链路数据湖开发治理能力,帮助客户提升数据的应用效率。同时,也是...

阿里云EMR数据湖文件系统: 面向开源和云打造下一代 HDFS

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐