问答 2024-06-14 来自:开发者社区

Flink CEP编程中当状态没有到达的时候会将数据保存在哪里

Flink CEP编程中当状态没有到达的时候会将数据保存在哪里

文章 2024-03-23 来自:开发者社区

flink 入门编程day02

kafka的消费者偏移量自动提交机制,它是按什么规律来提交消费位移的? 答:固定时间间隔 可以手动提交消费位移,如果是制动提交auto.offse.commit 消费位移提交到哪里呢? 如果是自动提交,或者是调用consumer.commitASnc(),是提交到consumer_offers主题 当然也可以手动控制消费位移保存到任意自定义存储系统中 (topicPartition,offset....

flink 入门编程day02
文章 2024-01-29 来自:开发者社区

Flink几道经典编程场景

1:分组TOPN一、代码思路(一)1: 定义的单独的pojo类UserBehavior 和 ItemViewCountUserBehavior  → 解析Json字符串后生成的JavaBean ItemViewCount → 最后结果输出的格式类2: 调用底层的Process(可做类似map的操作),将Json字符串解析成UserBehavior对象3、提取EventTime,转换成T....

Flink几道经典编程场景
文章 2024-01-29 来自:开发者社区

Flink窗口与状态编程开发(一)

tranformationreduce对按key分类的数据流进行"滚动"压缩。可以将当前元素与前一个元素进行整合处理,并返回一个新值。可用于前后数据的计算或拼接。例如下面例子,通过 id 字段进行分类,然后使用 reduce 进行压缩处理,每次将学生的名字字段进行拼接,年龄进行相加,返回一个新的对象:SingleOutputStreamOperator operator = source ...

Flink窗口与状态编程开发(一)
文章 2023-09-02 来自:开发者社区

Flink SQL 核心概念剖析与编程案例实战

本次,我们从 0 开始逐步剖析 Flink SQL 的来龙去脉以及核心概念,并附带完整的示例程序,希望对大家有帮助!本文大纲一、快速体验 Flink SQL为了快速搭建环境体验 Flink SQL,我们使用 Docker 来安装一些基础组件,包括 zk 和 kafka,如果你有这个环境,可以略过了。在 Centos 7 上安装 Docker 环境,具体见这个链接,此处就不细说了:https://....

Flink SQL  核心概念剖析与编程案例实战
问答 2023-05-16 来自:开发者社区

请问下,如果没有用到状态编程,且flink程序没有失败,会产生checkpoint么?就是没东西,让

请问下,如果没有用到状态编程,且flink程序没有失败,会产生checkpoint么?就是没东西,让我cancal作业时,再消费kafka,数据好像会丢

问答 2022-11-15 来自:开发者社区

请教下flink datastream api+table api 编程方式下,怎么控制table

请教下flink datastream api+table api 编程方式下,怎么控制table api生成的那部分transformation 中的并行,有大佬有修改过对应的flink 代码的吗,目前社区flink sql 只支持全局的配置。中间部分逻辑用sql好处理,所以我们有datastream到table 再到datastream ,目前用到table api那部分并行控制不了。

文章 2022-11-05 来自:开发者社区

Flink SQL 编程(二)| 学习笔记

开发者学堂课程【Apache Flink 入门到实战 - Flink 开源社区出品 : Flink SQL 编程(二)】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/632/detail/10032Flink SQL 编程(二) 四. 用 window 聚合和非 wi....

 Flink SQL 编程(二)| 学习笔记
文章 2022-11-05 来自:开发者社区

Flink Table API 编程| 学习笔记

开发者学堂课程【Apache Flink 入门到实战 - Flink 开源社区出品 :Flink Table API 编程】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/632/detail/10033Flink Table API 编程 目录一、什么是 Table ....

问答 2022-09-21 来自:开发者社区

flink状态编程的时候,是托管状态比如ValueState<T>这种,还需要实现自定义的ckp吗?

我并没有new 一个list这些来存储数据

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注