文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之需要对某些列进行聚合操作,该怎么操作

问题一:Flink CDC怎么能保证多个实例不会重复读书数据同一份binlog呢? Flink CDC去读取binlog的数据到应用程序的时候,如果我的服务是部署多个实例的话怎么能保证多个实例不会重复读书数据同一份binlog呢? 参考答案: server-id 需要配置的 flink这块默认的是一个范围内随机给你取值的 ,flink-cdc 里面配置...

实时计算 Flink版产品使用合集之需要对某些列进行聚合操作,该怎么操作
问答 2023-11-30 来自:开发者社区

Flink,对mysql cdc作为数据源的动态表进行over分组聚合操作的时候,是什么原因?

请问大家Flink,对mysql cdc作为数据源的动态表进行over分组聚合操作的时候,报错StreamPhysicalOverAggregate doesn't support consuming update and delete changes which is produce by node tablesourcesscan TableA 是什么原因? 而且我的表只有插入操作,没有up....

问答 2021-12-03 来自:开发者社区

Flink 中该如何实现“Group By聚合操作”这个需求?

SQL中对时间窗口和PRODUCT_ID进行了Group By聚合操作,PG数据表中的主键须设置为WINDOW_START /WINDOW_END和PRODUCT_ID,否则无法以upinsert方式写出数据,但是这样却无法满足业务场景的需求,业务上应以RANK_ID +WINDOW_START /WINDOW_END为主键标识,请问Flink 中该如何实现这个需求? 场景:T...

问答 2019-11-22 来自:开发者社区

flink 有那种把多条消息聚合成一条的操作吗,比如说每五十条聚合成一条

flink 有那种把多条消息聚合成一条的操作吗,比如说每五十条聚合成一条 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注