问答 2022-11-28 来自:开发者社区

Flink 通过iceberg 方式往S3写数据 这个有知道怎么做吗?看文档说和写HDFS方式是不一

Flink 通过iceberg 方式往S3写数据 这个有知道怎么做吗?看文档说和写HDFS方式是不一样的 因为存在文件的append方式

问答 2022-09-20 来自:开发者社区

flink checkpoint 如何设置为s3呢?哪个大佬指导一下

flink checkpoint 如何设置为s3呢?哪个大佬指导一下

问答 2022-08-25 来自:开发者社区

flink1.15.1配置全局保存点(S3),启动时报错如图,到minio那里看目录是已经创建了的,

flink1.15.1配置全局保存点(S3),启动时报错如图,到minio那里看目录是已经创建了的,哪位大佬知道怎么回事吗?

问答 2022-07-22 来自:开发者社区

用flink 写 parquet 到S3 ,样例类的顺序,和 S3存储的parquet 的字段顺序不

用flink 写 parquet 到S3 ,样例类的顺序,和 S3存储的parquet 的字段顺序不一致。S3存储parquet 的顺序好是按照字段名称的字母顺序排列的(例如:样例类是id,colid,status,到S3就变成了 colid,id,status 了),你们有遇见过这种情况吗?

问答 2019-11-28 来自:开发者社区

各位大佬,请问有Flink写S3的方案吗?

各位大佬,请问有Flink写S3的方案吗? 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

问答 2018-12-11 来自:开发者社区

Flink Shaded Hadoop S3文件系统仍然需要hdfs-default和hdfs-site配置路径

我正在尝试使用Flink 1.6.0将S3配置为我的状态后端。 flink-conf.yamlstate.backend: filesystemstate.checkpoints.dir: s3://*/flink-checkpointsstate.savepoints.dir: s3://*/flink-savepoints s3.access-key: *s3.secret-key: *ht....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注