问答 2024-06-13 来自:开发者社区

Flink访问Iceberg Connector支持Apache Iceberg v2表格式吗

Flink访问Iceberg Connector支持Apache Iceberg v2表格式吗

文章 2024-03-12 来自:开发者社区

最强指南!数据湖Apache Hudi、Iceberg、Delta环境搭建

1. 引入 作为依赖Spark的三个数据湖开源框架Delta,Hudi和Iceberg,本篇文章为这三个框架准备环境,并从Apache Spark、Hive和Presto的查询角度进行比较。主要分为三部分 准备单节点集群,包括:Hadoop,Spark,Hive,Presto和所有依赖项。 测试Delta,Hudi,Iceberg在更新,删除,时间旅行,Sc...

最强指南!数据湖Apache Hudi、Iceberg、Delta环境搭建

Apache RocketMQ:如何从互联网时代演进到云

1 课时 |
266 人已学 |
免费

Apache Flink 入门到实战 - Flink开源社区出品

16 课时 |
1573 人已学 |
免费

Apache Flink 入门

9 课时 |
5062 人已学 |
免费
开发者课程背景图
文章 2023-10-10 来自:开发者社区

Apache Iceberg 表有哪些性能优化方式

Apache Iceberg是一种开源的分布式数据表格格式,旨在提供可扩展性、性能和数据一致性。它建立在Apache Hadoop的基础上,并支持多种数据湖存储(如Hadoop HDFS、Amazon S3等)。为了优化Apache Iceberg表的性能,可以采取多种策略和技术,以下是一些重要的性能优化方式和详...

文章 2022-07-12 来自:开发者社区

Apache Doris 整合 FLINK CDC + Iceberg 构建实时湖仓一体的联邦查询

1.概览这篇教程将展示如何使用 Flink CDC + Iceberg + Doris 构建实时湖仓一体的联邦查询分析,Doris 1.1版本提供了Iceberg的支持,本文主要展示Doris和Iceberg怎么使用,同时本教程整个环境是都基于伪分布式环境搭建,大家按照步骤可以一步步完成。完整体验整个搭建操作的过程。1.1 ...

Apache Doris 整合 FLINK CDC + Iceberg 构建实时湖仓一体的联邦查询
问答 2021-12-09 来自:开发者社区

Apache Iceberg提供的核心能力有哪些?

Apache Iceberg提供的核心能力有哪些?

文章 2021-04-25 来自:开发者社区

回顾 | Apache Flink x Iceberg Meetup · 上海站精彩回顾 (附PPT下载)

4 月 17 日,Apache Flink Meetup 上海站圆满结束!本次 Meetup,社区邀请了来自阿里巴巴、腾讯、Dell 科技集团、汽车之家的 4 位技术专家分享了超多关于 Flink & 数据湖的内容,全方位解析数据湖生产应用难题。众多技术同学积极参与了此次活动,相互之间进行了友好的技术交流,同时也交换了各自对 Flink x Iceberg 生产应用的现状与未来的看法。当....

回顾 | Apache Flink x Iceberg Meetup · 上海站精彩回顾 (附PPT下载)
文章 2021-02-05 来自:开发者社区

深度集成 Flink: Apache Iceberg 0.11.0 最新功能解读

在 2021 年 1 月 27 日,Apache Iceberg 发布了 0.11.0 版本[1]。在这个版本中,实现了以下核心功能:1、Apache Iceberg 在 Core API 层面支持了 partition 的变更;同时还在 Iceberg Format v2 之上新增了 SortOrder 规范,主要用于将那些散列度较高的 column 聚集在少数几个文件内,这样可以大量减少小.....

深度集成 Flink: Apache Iceberg 0.11.0 最新功能解读
文章 2020-02-28 来自:开发者社区

Apache iceberg:Netflix 数据仓库的基石

Apache Iceberg 是一种用于跟踪超大规模表的新格式,是专门为对象存储(如S3)而设计的。 本文将介绍为什么 Netflix 需要构建 Iceberg,Apache Iceberg 的高层次设计,并会介绍那些能够更好地解决查询性能问题的细节。 本文由 Ryan Blue 分享,他在 Netflix 从事开源数据项目,是 Apache Iceberg 的最初创建者之一,也是 Apache....

Apache iceberg:Netflix 数据仓库的基石

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
相关镜像