问答 2024-01-04 来自:开发者社区

Flink sql滚动窗口怎么操作能实现stream里的allowlateness?

Flink sql滚动窗口怎么操作能实现stream里的allowlateness?

问答 2023-11-30 来自:开发者社区

请教下,flink on yarn中在flink conf目录下的中配置的滚动日志,为啥不生效?

请教下,flink on yarn中在flink conf目录下的log4j.properties中配置的滚动日志,为啥不生效?

问答 2023-11-22 来自:开发者社区

Flink可以配置滚动tm.err和tm.out文件吗?

Flink可以配置滚动tm.err和tm.out文件吗?业务经常写满机器磁盘

问答 2023-10-31 来自:开发者社区

Flink CDC那位之前用过滚动窗口设置水位线进行聚合计算呢?

Flink CDC那位大佬之前用过滚动窗口设置水位线进行聚合计算呢? public void onPeriodicEmit(WatermarkOutput output) { output.emitWatermark(new Watermark(currentMaxTimestamp - maxOutOfOrderness)); }重写设置水位线的方法 发现一个问题 大部...

问答 2023-09-13 来自:开发者社区

请问一下flink sql的问题 , 使用处理时间时,滚动窗口不支持grouping sets么?

请问一下flink sql的问题 , 使用处理时间时,滚动窗口不支持grouping sets么?

问答 2023-09-13 来自:开发者社区

Flink每分钟有200+的数据,然后按照每分钟统计数据,开成 1分钟的滚动窗口,这样会影响性能吗?

Flink每分钟有200+的数据,然后按照每分钟统计数据,开成 1 分钟的滚动窗口,这样会影响性能吗?

问答 2023-09-06 来自:开发者社区

Flink CDC我是滚动窗口 每3分钟更新一次 应该不会更新了呀,我看两个时间都是一样的呀?

Flink CDC我是滚动窗口 每3分钟更新一次 应该不会更新了呀,而且你看我这个截图 我最后一个字段表示的是处理时间 我看两个时间都是一样的呀?

问答 2023-09-06 来自:开发者社区

Flink CDC我想使用滚动窗口 我必须后面要加group by嘛?

Flink CDC我想使用滚动窗口 我必须后面要加group by嘛?我本意是想拿到这个窗口中的所有字段值

问答 2023-08-22 来自:开发者社区

如果Flink CDC挂了怎么办?而且我是拉取mongo的那个oplog日志,那个oplog日志滚动

问题1:如果Flink CDC挂了怎么办?而且我是拉取mongo的那个oplog日志,那个oplog日志滚动速度很快,最多也就是保存一个小时左右把,有没有像sparkstreaming那样子,我启动的时候,先查询mysql保存的偏移量,然后呢去消费数据,消费完数据以后,再把偏移量写入到mysql里面,然后下一批次的时候,我再去查询mysql的偏移量,然后再处理数据。问题2:我现在看看有没有什么其....

问答 2023-08-20 来自:开发者社区

一个Flink SQl的job中,消费同一个kafka,使用滚动窗口计算每小时的统计,使用渐进式窗?

一个Flink SQl的job中,消费同一个kafka,使用滚动窗口计算每小时的统计,使用渐进式窗口计算零点到当前的统计;现在遇到一个问题:滚动窗口计算 需要设置 table.exec.emit.early-fire.enabled = true; table.exec.emit.early-fire.delay = 10000; 也就是每10秒去触发计算一次(因为页面要展示,不能每一个小时计算....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注