问答 2023-09-28 来自:开发者社区

有人遇到过 scala 中 flink sinkdoris 设置 不生效 的问题吗?

有人遇到过 scala 中 flink sinkdoris 设置 CheckInterval 与 BufferCount 不生效 的问题吗?根据测试结果 走的应该是checkpoint 而不是 按照这两个参数进行数据库写入的

问答 2023-08-29 来自:开发者社区

scala中关闭任务结束后的 Checkpoint,Flink设置的时候报异常,怎么解决?

scala中关闭任务结束后的 Checkpoint,Flink设置的时候报异常,怎么解决?

问答 2023-05-28 来自:开发者社区

放弃flink mongodb cdc 了,用scala写的,依赖根本解不完,也没人更新维护,后面?

放弃flink mongodb cdc 了,用scala写的,依赖根本解不完,也没人更新维护,后面测试下debezium。从maven引用 com.ververica flink-connector-mongodb-cdc 2.3.0依赖的jar包自己内部都不兼容,真是调了整整一天,真是面向依赖编程, 怀疑是这块儿官网写错了,上面的maven依赖和下面的jar包根本就不是一个,提供两个不一样但很....

问答 2023-01-03 来自:开发者社区

flink:1.14.5-scala_2.12 请问大佬这是cdc版本与flink不兼容吗?初次使用

flink:1.14.5-scala_2.12 请问大佬这是cdc版本与flink不兼容吗?初次使用flink cdc

问答 2022-10-06 来自:开发者社区

阿里云实时计算Flink 如果使用自定义connector。支持哪个scala版本呢?

2.12目前报错

问答 2022-08-31 来自:开发者社区

我M1在Docker装zepplin用IDEA scala写flink,代码报红,这种有解决方案吗?

我M1在Docker装zepplin用IDEA scala写flink,代码报红,这种有解决方案吗? 还是说M1芯片目前解决不了这个问题?

文章 2022-08-22 来自:开发者社区

Flink / Scala - DataSource 之 DataSet 获取数据总结

一.引言编辑数据源创建初始数据集,这里主要以 DataSet 数据源为例,例如从文件或者从 collection 中创建,后续介绍 DataStreaming 的数据源获取方法。创建数据集的机制一般抽象在 InputFormat 后面,这里有点类似 spark 的 sparkContext,Flink 的 ExecutionEnvironment 也提供了很多快捷的方法。主要分为下面几大类,基于....

Flink / Scala - DataSource 之 DataSet 获取数据总结
文章 2022-08-22 来自:开发者社区

Flink / Scala - DataSet Transformations 常用转换函数详解

一.引言上一篇文章讲到了 Flink 如何获取数据生成 DataSet,这篇文章主要讨论 DataSet 后续支持的 Transform 转换函数。相较于 Spark,Flink 提供了更多的 API 和更灵活的写法与实现。编辑 Tips :下述示例均以该 env 为基础实现import org.apache.flink.api.scala.ExecutionEnvironment def ...

Flink / Scala - DataSet Transformations 常用转换函数详解
文章 2022-08-22 来自:开发者社区

Flink / Scala - DataSet & DataStream Sink 输出数据详解

 一.引言Flink 的数据处理主要分三步,第一步 Source 为数据源,分为 DataSet 和 DataStreaming ,后一步为 Transformation 负责处理和转换数据,针对不同的 DataSource,Transformation 可能会存在差异,最后一步是 sink 负责将结果输出。前面介绍了 DataSet 的 Source 和 Transformation....

Flink / Scala - DataSet & DataStream Sink 输出数据详解
文章 2022-08-22 来自:开发者社区

Flink / Scala - DataSource 之 DataStream 获取数据总结

一.引言DataStream API 得名于特殊的 DataStream 类,该类用于表示 Flink 程序中的数据集合。你可以认为 它们是可以包含重复项的不可变数据集合。这些数据可以是有界(有限)的,也可以是无界(无限)的,但用于处理它们的API是相同的。DataStream 在用法上类似于常规的 Java 集合,但在某些关键方面却大不相同。它们是不可变的,这意味着一旦它们被创建,你就不能添加....

Flink / Scala - DataSource 之 DataStream 获取数据总结

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注