文章 2023-12-25 来自:开发者社区

大数据Flink面试考题___Flink高频考点,万字超全整理(建议)

引言大家好,我是ChinaManor,直译过来就是中国码农的意思,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。Flink知识回顾考卷如下:选择题1.下面哪个不是 Dataset的转换算子()A. readTextFile B reduce distinct D rebalance2.关于状态管理分类,下面哪个是错误的(A keyed state B opera....

大数据Flink面试考题___Flink高频考点,万字超全整理(建议)
问答 2023-12-20 来自:开发者社区

sql-flink-大数据计算MaxComputemy运行正常没有报错,为什么一条数据都没有进表里?

sql-flink-中大数据计算MaxComputemy运行正常没有报错,一条数据都没有进表里,是什么问题? 我是参考这个教程做的: https://help.aliyun.com/zh/maxcompute/user-guide/use-flink-streaming-data-transmission-new-version/?spm=a2c4g.11186623.0.i18用的是自建的fl....

问答 2023-12-19 来自:开发者社区

Flink CDC想了解选型哪个工具更适合,有对比过常用的大数据全量工具吗?

Flink CDC想了解选型哪个工具更适合,有对比过常用的大数据全量工具吗?

问答 2023-12-11 来自:开发者社区

Flink CDC有啥好的解决方案吗?大数据量es数据同步,就是俩es集群之间,a到b?

Flink CDC有啥好的解决方案吗?大数据量es数据同步,就是俩es集群之间,a到b?

问答 2023-12-10 来自:开发者社区

Flink写数据到大数据计算MaxCompute的表中报下面这个错,请问是我建表有问题么?

Flink写数据到大数据计算MaxCompute的表中报下面这个错,请问是我建表有问题么?

文章 2023-10-12 来自:开发者社区

大数据之实时计算

实时计算是大数据处理的其中一种方式,它可以在数据产生或到达后立即进行处理和分析,并且能够提供实时反馈和响应。相比离线批处理,实时计算更加灵活、快速和高效。 实时计算的应用场景包括金融交易、网络安全、智能制造、物联网等领域。例如,在金融交易中,实时计算可以对交易进行监控、分析和预测,并及时发出风险警报;...

文章 2023-10-07 来自:开发者社区

大数据组件-Flink环境搭建

1.Flink组件介绍Flink(Apache Flink)是一个开源的流处理和批处理框架,它具有高性能、低延迟、容错性和灵活性的特点。Flink拥有强大而灵活的数据处理能力,用户可以根据自己的需求选择合适的组件和API来构建复杂的数据处理流程和批处理任务。以下是 Flink 的一些重要组件的介绍:Flink Core: Flink核心组件提供了任务调度、作业管理、资源管理、容错机制和数据传输等....

大数据组件-Flink环境搭建
问答 2023-10-07 来自:开发者社区

flink多并行度大数据量去重,我们有没有什么好的方案?

flink多并行度大数据量去重,我们有没有什么好的方案?

文章 2023-09-17 来自:开发者社区

大数据Flink VS Spark

1 Flink VS Spark运行角色⚫ Spark Streaming 运行时的角色(standalone 模式)主要有:✓ Master:主要负责整体集群资源的管理和应用程序调度;✓ Worker:负责单个节点的资源管理,driver 和 executor 的启动等;✓ Driver:用户入口程序执行的地方,即 SparkContext 执行的地方,主要是 DAG 生成、stage划分、t....

大数据Flink VS Spark
文章 2023-09-17 来自:开发者社区

大数据Flink内存管理

1 内存管理问题引入Flink本身基本是以Java语言完成的,理论上说,直接使用JVM的虚拟机的内存管理就应该更简单方便,但Flink还是单独抽象出了自己的内存管理因为Flink是为大数据而产生的,而大数据使用会消耗大量的内存,而JVM的内存管理管理设计是兼顾平衡的,不可能单独为了大数据而修改,这对于Flink来说,非常的不灵活,而且频繁GC会导致长时间的机器暂停应用,这对于大数据的应用场景来说....

大数据Flink内存管理

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注