基于 Flink+Iceberg 构建企业级实时数据湖
Apache Flink 是大数据领域非常流行的流批统一的计算引擎，数据湖是顺应云时代发展潮流的新型技术架构。那么当 Apache Flink 遇见数据湖时，会碰撞出什么样的火花呢？本次分享主要包括以下核心内容： 数据湖的相关背景介绍； 经典业务场景介绍； 为什么选择 Apache Iceberg； 如何通过 Flink+Iceberg 实现流式入湖 社区未来规划工作。 视频回顾：https...
重磅下载！首次揭秘如何构建阿里云云原生数据湖体系
《阿里云云原生数据湖体系全解读》是阿里云首次发布云原生数据湖体系，基于对象存储OSS、数据湖构建Data Lake Formation和E-MapReduce产品的强强组合，提供存储与计算分离架构下，涵盖湖存储、湖加速、湖管理和湖计算的企业级数据湖解决方案。 复制该链接到浏览器完成下载或分享：https://developer.aliyun.com/topic/download?id=900 .....
9.16直播预告｜DLA一站式数据湖管理-如何高效构建安全的数据湖？
锁定周三（9月16号）下午4点哦～ 本期直播主题：DLA一站式数据湖管理-如何高效构建安全的数据湖？ 直播时间：9月16号（周三）16:00-17:00 直播讲师：沐远｜阿里云-数据库产品事业部-Data Lake Analytics专注大数据分布式计算数据库数据湖领域，7年分布式开发经验，先后研发Spark及自主研发内存计算、数据湖管理服务。目前为广大公有云用户提供专业的数据湖分析服务...
基于JindoFS+OSS构建高效数据湖
为什么要构建数据湖 大数据时代早期，Apache HDFS 是构建具有海量存储能力数据仓库的首选方案。随着云计算、大数据、AI 等技术的发展，所有云厂商都在不断完善自家的对象存储，来更好地适配 Apache Hadoop/Spark 大数据以及各种 AI 生态。由于对象存储有海量、安全、低成本、高可靠、易集成等优势，各种 IoT 设备、网站数据都把各种形式的原始文件存储在对象存储上，利用对象存储....
使用 E-MapReduce 构建云上数据湖
原视频链接：https://www.slidestalk.com/AliSpark/EMapReduce191196?video 编辑：杨仲鲍，北京海致星图科技有限公司服务端开发工程师 ，大数据爱好者，Spark 中文社区志愿者 首先介绍一下阿里云飞天大数据平台(简称飞天平台)，飞天平台由AI-PAI（机器学习和深度学习的平台）和大数据平台组成。 除 EMR 之外，还有像 MaxComput...
基于阿里云数据湖分析服务和Apache Hudi构建云上实时数据湖
1. 什么是实时数据湖 大数据时代数据格式的多样化，如结构化数据、半结构化数据、非结构化数据，传统数据仓库难以满足各类数据的存储，同时传统数仓已经难以满足上层应用如交互式分析、流式分析、ML等的多样化需求。而数仓T+1的数据延迟导致分析延迟较大，不利于企业及时洞察数据价值；同时随着云计算技术发展以及云上对象存储的廉价性，使得越来越多企业基于云来构建数据湖，而传统数据湖由于缺失ACID事务能力，导....
Isilon三款新品构建数据湖2.0策略
公司的边缘数据一直是被忽略的存在，据ESG的报告显示，将近70%的公司存在边缘办公室，并且边缘数据达到了10PB。如何将这些边缘数据管理起来成为一个挑战，因为边缘数据在存储上存在一定的技术壁垒，Isilon则发布3款新产品IsilonSD Edge、新一代IsilonOneFS操作系统、新一代IsilonCloudPool来拓展数据湖策略，打通边缘、核心和云。 向数据湖2.0扩展 Isilon自....
如何构建下一代大数据架构——数据湖
如何创建一个适用于多样数据类型，并可扩展的敏捷数据平台?答案就在数据湖中! 图片源于网络 技术和软件的进步使我们能够处理和分析大量数据。虽然很明显，大数据是一个企业投入了大量资金的热门话题，但要注意，除了考虑数据规模，我们还需要考虑到被分析数据类型的多样性。数据种类不同意味着数据集可以存储在许多格式和存储系统中，每个类型都有自己的特征。 考虑数据多样性是一项艰巨的任务，但有一种方法可以使你36.....
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
