问答 2025-02-17 来自:开发者社区

flink 读取oss-hdfs数据问题

Flink 尝试从 OSS 获取分区信息时,由于权限不足导致访问被拒绝。但是注意到这里的endpoint实际上是oss的endpoint,但是我的数据存储在oss-hdfs中,请问我该如何访问到oss-hdfs中的数据?已经在配置文件中设置fs.oss.jindo.endpoint: cn-beijing.oss-dls.aliyuncs.com

问答 2024-08-28 来自:开发者社区

Flink在oss并没有生成文件是为什么?

Flink在oss并没有生成文件是为什么?

高性能

基于 Flink CDC 打造企业级实时数据同步方案

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
文章 2024-08-19 来自:开发者社区

实时计算 Flink版产品使用问题之以jar包方式同步数据是否需要定义存储oss的位置

问题一:Flink的jar包方式同步数据,代码里面还需不需要定义存储oss位置? Flink的jar包方式同步数据,代码里面还需不需要定义存储oss位置? 参考答案: 参考 这是jar包开发文档:h...

实时计算 Flink版产品使用问题之以jar包方式同步数据是否需要定义存储oss的位置
问答 2024-07-31 来自:开发者社区

在Flink CDC中,有遇到此报错吗?将检查点写入到oss,启动job报错。

在Flink CDC中,有遇到此报错吗?将检查点写入到oss,启动job报错。

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之如何实现OSS数据到Kafka的实时同步

问题一:Flinkcdc支持从Oracle备库抽取数据么? Flinkcdc支持从Oracle备库抽取数据么? 参考答案: 支持 关于本问题的更多回答可点击进行查看: https://developer.aliyun.com/ask/607306 问题二:flink cdc 读取多个表,,...

实时计算 Flink版产品使用问题之如何实现OSS数据到Kafka的实时同步
问答 2024-06-14 来自:开发者社区

实时计算Flink版使用的OSS可以跨账号使用吗

实时计算Flink版使用的OSS可以跨账号使用吗

问答 2024-06-14 来自:开发者社区

实时计算可以将数据导入到阿里云的OSS吗

实时计算可以将数据导入到阿里云的OSS吗

问答 2024-06-14 来自:开发者社区

实时计算Flink任务默认写出到OSS的有哪些文件

实时计算Flink任务默认写出到OSS的有哪些文件

问答 2024-06-11 来自:开发者社区

不同版本的Flink如何写入OSS

不同版本的Flink如何写入OSS

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注