文章 2025-03-31 来自:开发者社区

Flink批处理自适应执行计划优化

摘要:本文整理自阿里集团爱橙科技高级开发工程师、Apache Flink Contributor孙夏老师在Flink Forward Asia 2024 核心技术(二)专场中的分享。内容主要为以下三部分: 1、自适应逻辑执行计划 2、自适应 Join 算子优化 3、未来展望 01、自适应逻辑执行计划 1.1作业的执行计划 首先,让我们先来简单回顾下目前Flink支持了哪些执行计划。左边...

Flink批处理自适应执行计划优化
问答 2024-08-28 来自:开发者社区

Flink任务编排 可以跑 msyql同步到mysql的批处理任务吗?

Flink任务编排 可以跑 msyql同步到mysql的批处理任务吗?

文章 2024-08-24 来自:开发者社区

Flink流处理与批处理大揭秘:实时与离线,一文让你彻底解锁!

Apache Flink是一个开源的流处理框架,支持批处理和流处理。本文将对比分析Flink流处理和批处理的特点、适用场景和示例代码。 流处理:Flink的流处理用于处理实时数据流,支持无限数据流和事件驱动的应用。在流处理中,数据以连续的流形式输入,Flink会不断地处理这些数据,并实时输出结果。以下是一个简单的...

文章 2024-08-18 来自:开发者社区

实时计算 Flink版操作报错合集之在使用批处理模式中使用flat_aggregate函数时报错,该如何解决

问题一:在阿里云全托管flink平台部署jar任务总是报错,如何解决? 在阿里云全托管flink平台部署jar任务总是报错,如何解决?Class conflicts, detailed context: ClassNotFoundException: com.aliyun.tea.TeaException 参考答案: 此问题可能是由于依赖冲突导致的。当...

实时计算 Flink版操作报错合集之在使用批处理模式中使用flat_aggregate函数时报错,该如何解决
问答 2024-08-07 来自:开发者社区

Flink 1.15 引入的自适应批处理调度器的主要优点是什么?

Flink 1.15 引入的自适应批处理调度器的主要优点是什么?

问答 2024-07-31 来自:开发者社区

flink 批处理,source 和sink 都是holo ,有哪篇文章可以参考?

flink 批处理,source 和sink 都是holo ,有哪篇文章可以参考?

问答 2024-06-24 来自:开发者社区

问一下flink批处理,join超20张表会报空指针,这边是不是有什么限制在里面?

问一下flink批处理,join超20张表会报空指针,这边是不是有什么限制在里面?

问答 2024-06-19 来自:开发者社区

在Flink大概什么样的场景会需要用到流批一体?一边处理实时流,一边批处理历史数据

在Flink大概什么样的场景会需要用到流批一体?一边处理实时流,一边批处理历史数据

问答 2024-06-16 来自:开发者社区

Flink批处理之后得度量数据为啥就不能拿了呢?

Flink批处理之后得度量数据为啥就不能拿了呢?

问答 2024-06-16 来自:开发者社区

在Flink CDC中批处理之后得度量数据为什么就不能拿了呢?

在Flink CDC中批处理之后得度量数据为什么就不能拿了呢?请参考图片:

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注