阿里云文档 2025-06-25

VVP Flink CDC对接DLF Paimon Catalog

本文为您介绍如何通过阿里云实时计算Flink版(以下简称VVP)将Flink CDC数据实时摄入至DLF Paimon Catalog,实现高效的数据湖存储与管理。

阿里云文档 2025-06-19

VVP Flink SQL对接DLF Paimon Catalog

本文为您介绍如何在阿里云实时计算Flink版(以下简称VVP)上实现Flink SQL与DLF Paimon Catalog的对接。

阿里云文档 2025-06-06

VVP Flink DataStream对接DLF Paimon Catalog

本文为您介绍如何通过Flink DataStream作业将数据高效写入DLF Paimon Catalog,实现数据湖存储与管理。

文章 2025-05-28 来自:开发者社区

基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路

摘要:本文整理自淘天集团高级数据开发工程师朱奥老师在 Flink Forward Asia 2024 流式湖仓论坛的分享。内容主要为以下五部分: 1、项目背景 2、核心策略 3、解决方案 4、项目价值 5、未来计划 01、项目背景 1.1 当前实时数仓架构 当前的淘天实时架构是从日志服务器和业务数据库采集数据,实时数据采集到 TT (消息队列中间件,对标 Kafka)中,离线数据采...

基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
文章 2025-05-16 来自:开发者社区

Flink x Paimon 在抖音集团生活服务的落地实践

摘要:本文整理自抖音集团数据工程师陆魏老师和流式计算工程冯向宇老师,在Flink Forward Asia 2024 流式湖仓(二)专场的分享。内容分为以下三个部分: 1、背景及现状 2、Paimon湖仓实践 3、Paimon技术优化 01. 背景及现状 抖音生活服务是抖音集团重要的业务板块,主要通过抖音直播、短视频、团购以及本地同城等流量入口,引导用户进行线上下单支付,并进而引导用户线...

Flink x Paimon 在抖音集团生活服务的落地实践
阿里云文档 2024-12-10

Paimon系统表

Paimon系统表用于存储Paimon表的元数据和特定的数据消费行为。本文为您介绍Paimon元数据系统表和特定消费行为的有关系统表作用,相关的字段及含义等。

阿里云文档 2024-10-14

实时计算Flink和Paimon实现流批一体

本文演示了使用实时计算Flink版和EMR Serverless Spark构建Paimon数据湖分析流程。该流程包括将数据写入OSS、进行交互式查询以及执行离线数据Compact操作。EMR Serverless Spark完全兼容Paimon,通过内置的DLF元数据与其他云产品(例如,实时计算Flink版)实现元数据互通,形成完整的流批一体化解决方案。它支持灵活的任务运行方式和参数配置,满足实...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注