文章 2025-09-12 来自:开发者社区

实现千表入湖之Apache Paimon篇

实现千表入湖之Apache Paimon篇

实现千表入湖之Apache Paimon篇
文章 2025-08-27 来自:开发者社区

湖仓一体:小米集团基于 Apache Doris + Apache Paimon 实现 6 倍性能飞跃

企业在数据驱动的道路上,始终面临一对核心矛盾:既需要低成本、可扩展的存储方案来承载海量结构化、半结构化乃至非结构化数据(这正是数据湖的强项),又渴望实时、低延迟的分析能力来支撑业务决策(这是分析型数据库的核心优势)。 然而现实是,单独的解决方案往往难以两全:以 Apache Paimon 为代表的数据湖技术,虽凭借开放格式、弹性扩展和低成本存储成为企业数据中台的基石,但在低延迟响应上存在天然短板....

湖仓一体:小米集团基于 Apache Doris + Apache Paimon 实现 6 倍性能飞跃
文章 2025-03-01 来自:开发者社区

官宣|Apache Paimon 1.0 发布公告

Apache Paimon PMC 正式发布具有里程碑意义的 1.0 稳定版本(版本号 1.0.1)。这次核心版本历经近5个月的精心打磨,汇集了来自全球开源社区的 70 余位开发者智慧,累计完成 520 余项代码提交,充分展现了社区驱动的技术演进力量。我们谨向所有参与贡献的开发者致以诚挚谢意! 值得关注的是,Paimon 1.0 已成功通过阿里巴巴集团和字节跳动等头部企业的严...

官宣|Apache Paimon 1.0 发布公告
文章 2025-03-01 来自:开发者社区

小米基于 Apache Paimon 的流式湖仓实践

摘要:本文整理自计算平台软件研发工程师钟宇江老师在 Flink Forward Asia 2024 流式湖仓(一)专场中的分享。内容主要为以下三部分: 背景介绍 基于 Paimon 构建近实时数据湖仓 未来展望 01背景介绍 第一部分是背景介绍,简单介绍之前的典型的实时数仓的架构,以及引入 Apache Pai...

小米基于 Apache Paimon 的流式湖仓实践
文章 2025-02-26 来自:开发者社区

小米基于 Apache Paimon 的流式湖仓实践

摘要:本文整理自计算平台软件研发工程师钟宇江老师在 Flink Forward Asia 2024 流式湖仓(一)专场中的分享。内容主要为以下三部分: 一、背景介绍 二、基于 Paimon 构建近实时数据湖仓 三、未来展望 一、背景介绍 第一部分是背景介绍,简单介绍之前的典型的实时数仓的架构,以及引入 Apache Paimon 的原因。 1.1 当前实时湖仓计算框架以 Flink + ...

小米基于 Apache Paimon 的流式湖仓实践
文章 2024-11-04 来自:开发者社区

Apache Spark & Paimon Meetup · 北京站,助力 LakeHouse 架构生产落地

众所周知,LakeHouse 架构是当前大数据领域领先的技术架构之一。LakeHouse 由海外知名大数据公司 Databricks 提出,旨在融合数据湖的灵活性及成本效益与传统数据仓库的强大事务支持、高性能分析能力于一体,并且能够无缝集成机器学习等多种应用场景,为企业提供了更加全面的数据管理和分析平台。 Apache Spark 作为近十几年来大数据领域最优秀的开源项目之一,...

Apache Spark & Paimon Meetup · 北京站,助力 LakeHouse 架构生产落地
文章 2024-11-04 来自:开发者社区

巴别时代使用 Apache Paimon 构建 Streaming Lakehouse 的实践

随着数据湖技术的不断发展,越来越多的企业开始探索如何利用这一新兴技术来优化数据处理流程。Apache Paimon 是一款高性能的数据湖框架,它支持流式处理和批处理,能够为实时数据分析提供强大的支持。本文将分享巴别时代在构建基于 Apache Paimon 的 Streaming Lakehouse 方面的一些探索和实践经验。 Apache Paimon...

文章 2024-10-18 来自:开发者社区

Apache Paimon 是一款高性能的数据湖框架,支持流式和批处理,适用于实时数据分析

随着数据湖技术的不断发展,越来越多的企业开始探索如何利用这一新兴技术来优化数据处理流程。Apache Paimon 是一款高性能的数据湖框架,它支持流式处理和批处理,能够为实时数据分析提供强大的支持。本文将分享巴别时代在构建基于 Apache Paimon 的 Streaming Lakehouse 方面的一些探索和实践经验。 Apache Paimon...

文章 2024-08-22 来自:开发者社区

Apache Paimon V0.9最新进展

摘要:本文整理自 Paimon PMC Chair 李劲松老师在 8 月 3 日 Streaming Lakehouse Meetup Online(Paimon x StarRocks,共话实时湖仓架构)上的分享。主要分享 Apache Paimon V0.9 的最新进展以及遇到的一些挑战。1. Paimon:飞速发展的 2024Paimon 诞生于 2022 年的 Flink 社区,并在 2....

Apache Paimon V0.9最新进展
文章 2024-08-09 来自:开发者社区

【破晓数据湖新时代!】巴别时代揭秘:Apache Paimon 打造 Streaming Lakehouse 的神奇之旅!

随着数据湖技术的不断发展,越来越多的企业开始探索如何利用这一新兴技术来优化数据处理流程。Apache Paimon 是一款高性能的数据湖框架,它支持流式处理和批处理,能够为实时数据分析提供强大的支持。本文将分享巴别时代在构建基于 Apache Paimon 的 Streaming Lakehouse 方面的一些探索和实践经验。 Apache Paimon...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
相关镜像