文章 2025-02-19 来自:开发者社区

美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台

作者:美的楼宇科技事业部 先行研究中心智能技术部 美的楼宇科技 IoT 数据平台建设背景 美的楼宇科技事业部(以下简称楼宇科技)是美的集团旗下五大板块之一,产品覆盖多联机组、大型冷水机组、单元机、机房空调、扶梯、直梯、货梯以及楼宇自控软件和建筑弱电集成解决方案,远销海内外200多个国家。针对当前设备数据量庞大且持续增长、数据呈现半结构化特点的现状,现有系统仅停留在数据存...

美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台
文章 2024-10-24 来自:开发者社区

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse

讲师:焦明烨 阿里云计算平台事业部OLAP引擎开发工程师 主要内容: StarRocks数据湖能力介绍 使用阿里云EMR StarRocks构建基于Paimon的极速实时湖仓 StarRocks + Paimon的最新进展 StarRocks + Paimon未来规划     ...

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse
文章 2024-10-17 来自:开发者社区

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse

摘要:本文整理自阿里云计算平台事业部 OLAP 引擎开发工程师焦明烨老师在8月3日 Streaming Lakehouse Meetup Online(Paimon x StarRocks,共话实时湖仓架构)上的分享。主要分为以下四个内容: StarRocks数据湖能力介绍使用阿里云EMR StarRocks构建基于Paimo...

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse
文章 2024-01-15 来自:开发者社区

阿里云 EMR 基于 Paimon 和 Hudi 构建 Streaming Lakehouse

1. 背景信息数据湖与传统的数据仓库相比,可以更灵活地处理各种类型的数据,并支持高度可扩展的存储,通常被用于大数据分析。为了支持准实时乃至实时的数据处理,数据湖需要能够快速地接收和存储数据(数据入湖),同时提供低延迟的查询性能以满足分析需求。Apache Paimon 和 Apache Hudi 作为数据湖存储格式,有着高吞吐的写入和低延迟的查询性能,是构建数据湖的常用组件。本文将在阿里云EMR....

阿里云 EMR 基于 Paimon 和 Hudi 构建 Streaming Lakehouse

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐