阿里云文档 2025-09-19

本文介绍了使用Flink、EMR Serverless Spark和Paimon构建流批一体数据湖分析的完整流程,包括数据写入、交互查询及Compact操作。

本文演示了使用实时计算Flink版和EMR Serverless Spark构建Paimon数据湖分析流程。该流程包括将数据写入OSS、进行交互式查询以及执行离线数据Compact操作。EMR Serverless Spark完全兼容Paimon,通过内置的DLF元数据与其他云产品(例如,实时计算Flink版)实现元数据互通,形成完整的流批一体化解决方案。它支持灵活的任务运行方式和参数配置,满足实...

阿里云文档 2025-09-11

如何通过Flink CDC实时订阅AnalyticDB for PostgreSQL的全量和增量数据

AnalyticDB for PostgreSQL提供自研的CDC连接器,基于PostgreSQL的逻辑复制功能实现订阅全量和增量数据,可与Flink无缝集成。该连接器能够高效捕获源表的实时变更数据,支持实时数据同步、流式处理等,助力企业快速响应动态数据需求。本文介绍如何通过阿里云实时计算Flink版CDC实时订阅AnalyticDB for PostgreSQL的全量和增量数据。

阿里云文档 2025-08-08

Flink最佳实践

本文主要介绍实时计算 Flink 版在读取数据和写入数据的最佳实践,确保可以高效地读写云原生数据仓库 AnalyticDB MySQL 版的数据。

阿里云文档 2025-03-26

如何使用Flink处理表格存储数据

本文为您介绍如何使用Flink计算表格存储(Tablestore)的数据,表格存储中的数据表或时序表均可作为实时计算Flink的源表或结果表进行使用。

阿里云文档 2025-02-19

使用Tablestore+Flink搭建高性能实时交易统计系统

本文为您介绍使用表格存储和Flink实现交易数据实时统计的样例场景、架构设计和实现方案。

问答 2025-02-17 来自:开发者社区

flink 读取oss-hdfs数据问题

Flink 尝试从 OSS 获取分区信息时,由于权限不足导致访问被拒绝。但是注意到这里的endpoint实际上是oss的endpoint,但是我的数据存储在oss-hdfs中,请问我该如何访问到oss-hdfs中的数据?已经在配置文件中设置fs.oss.jindo.endpoint: cn-beijing.oss-dls.aliyuncs.com

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之如何实现OSS数据到Kafka的实时同步

问题一:Flinkcdc支持从Oracle备库抽取数据么? Flinkcdc支持从Oracle备库抽取数据么? 参考答案: 支持 关于本问题的更多回答可点击进行查看: https://developer.aliyun.com/ask/607306 问题二:flink cdc 读取多个表,,...

实时计算 Flink版产品使用问题之如何实现OSS数据到Kafka的实时同步
问答 2024-06-07 来自:开发者社区

Flink中OSS是会存储什么数据

Flink中OSS是会存储什么数据

问答 2024-03-25 来自:开发者社区

Flink CDC里有没有什么方法 oss 实时同步数据到kafka?

Flink CDC里有没有什么方法 oss 实时同步数据到kafka?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注