阿里云文档 2024-09-19

对象存储OSS连接器

本文为您介绍如何使用对象存储OSS连接器。

问答 2023-05-23 来自:开发者社区

Flink CDC中存储在oss我一直搞不定···求仁指点了?这个怎么装载的?

Flink CDC中存储在oss我一直搞不定···求仁指点了?checkpoint? 这个怎么装载的?

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2023-05-23 来自:开发者社区

Flink CDC中你们有试过把checkpoint放在阿里云的oss的吗?

Flink CDC中你们有试过把checkpoint放在阿里云的oss的吗https://nightlies.apache.org/flink/flink-docs-release-1.17/docs/deployment/filesystems/oss/

问答 2023-05-14 来自:开发者社区

咨询一下问题,flink-cdc 有没有 OSS connectors?

咨询一下问题,flink-cdc 有没有 OSS connectors?

问答 2023-05-09 来自:开发者社区

Flink CDC 这个错误有人遇到过吗 . checkpoint保存到oss , 跑着跑着就报错了

Flink CDC 这个错误有人遇到过吗 . checkpoint保存到oss , 跑着跑着就报错了. 版本都是用的1.16.0

问答 2023-05-09 来自:开发者社区

请问一下, flink cdc 集成oss 用来保存checkpoint 的时候,配置都加进去了.

请问一下, flink cdc 集成oss 用来保存checkpoint 的时候,配置都加进去了. 但是报错Aliyun OSS endpoint should not be null or empty. Please set proper endpoint with 'fs.oss.endpoint'. 看代码没有使用传进去的configuration , 而是自己创建的一个. 这个...

问答 2023-04-28 来自:开发者社区

问下阿里全托管flink下,怎么在代码中配置oss路径的hive-catalog?

问下阿里全托管flink下,怎么在代码中配置oss路径的hive-catalog?云下配置本地路径没问题,云上配置oss的hive-catalog 目录,直接报

问答 2023-04-26 来自:开发者社区

Flink CDC这个错误有人遇到过吗?文件已经存进阿里云OSS了但是清理策略删不掉2023-04-

Flink CDC这个错误有人遇到过吗?文件已经存进阿里云OSS了但是清理策略删不掉2023-04-20 18:28:49,020 WARN org.apache.flink.runtime.blob.FileSystemBlobStore [] - Failed to delete blob at oss://xxxx/flink/jobmanager-ha/flink...

问答 2023-04-03 来自:开发者社区

flink(非EMR集群) 怎么将流式数据写入到oss ,有相关sink吗?

flink(非EMR集群) 怎么将流式数据写入到oss ,有相关sink吗?

问答 2023-03-07 来自:开发者社区

请问flink sql 写oss有个报错该怎么办?

请问flink sql 写oss 有个Caused by: TimerException{java.lang.UnsupportedOperationException: Cannot sync state to system like S3. Use persist() to create a persistent recoverable intermediate point.}这样的 报错该....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注