问答 2024-06-05 来自:开发者社区

在Flink CDC中 kafka不就是解决大数据量的吗?

在Flink CDC中 kafka不就是解决大数据量的吗?

问答 2024-05-17 来自:开发者社区

UseCompactObjectHeaders在Flink大数据处理中有何影响?

UseCompactObjectHeaders在Flink大数据处理中有何影响?

阿里云文档 2024-05-14

Flink版本调整

为了更好地融入开源生态,提供更加开放和多样化的计算服务,阿里云E-MapReduce(简称EMR)从EMR-5.17.0和EMR-3.51.0版本开始,将Flink引擎版本从Flink企业版Ververica Runtime(简称VVR)调整为Flink社区开源版本,同时引入RocksDB作为存储后端,以符合开源Flink的使用习惯。

文章 2024-04-24 来自:开发者社区

[AIGC大数据基础] Flink: 大数据流处理的未来

什么是 Flink Flink 建立在事件驱动的基础之上,可以处理高吞吐量和低延迟的数据流。与批处理系统不同,Flink 提供了实时流处理的能力,能够在数据生成时就进行处理,而不是等到数据全部到达后再处理。这使得 Flink 在需要实时结果的场景下非常有用,例如实时分析、弹性伸缩和数据管道。 Flink 的特点 真正的流处理 Flink 支持流式数据处理,并且能够...

问答 2024-04-02 来自:开发者社区

Flink CDC里问个大数据中间件选型的问题怎么办?

Flink CDC里问个大数据中间件选型的问题怎么办?mysql大概有几万左右,kafka每秒3万条。mysql中的数据有更新,但是不是很频繁。列式存储db可以解决吧,选哪种列式储存呢?

问答 2024-04-02 来自:开发者社区

我们使用开源的flink开发的作业,能否提交到大数据计算MaxCompute上运行吗?

想了解一下,我们使用开源的flink开发的作业,之前运行在yarn上,能否提交到大数据计算MaxCompute上运行?好像spark作业是可以直接对接maxCompute运行的

问答 2024-03-19 来自:开发者社区

Flink CDC 里我用mysqlcdc做大数据量同步怎么处理?

Flink CDC 里我用mysqlcdc做大数据量同步。后面发现mysql常驻内存一直居高不下,都超过90%了。 然后我把mysqlcdc停了,mysql常驻内存也没有释放掉。 请问有没有好的解决办法?

文章 2024-02-04 来自:开发者社区

【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)

前提介绍 关于Flink服务的搭建与部署,由于其涉及诸多实战操作而理论部分相对较少,小编打算采用一个独立的版本和环境来进行详尽的实战讲解。考虑到文字描述可能无法充分展现操作的细节和流程,我们决定以视频的形式进行分析和介绍。因此,在本文中,我们将暂时不涉及具体的搭建和部署步骤。 为确保大家能够更直观地掌握Flink服务的搭建与部署技巧,我们将专注于制作高质量的教学视频。后续,我们还会编写一篇与...

【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)
问答 2024-02-02 来自:开发者社区

使用自建flink写入大数据计算MaxCompute数据写不进去是咋回事?

使用自建flink写入大数据计算MaxCompute数据写不进去是咋回事?已开通Transaction Table2.0类型表

文章 2024-01-23 来自:开发者社区

Flink中Mesos在大数据领域中使用较多

Flink中Mesos在大数据领域中使用较多。Mesos是一个通用的集群管理器,可以管理各种类型的计算任务,包括批处理、流处理和交互式查询等。Flink作为一个分布式流处理框架,可以很好地与Mesos集成,利用Mesos提供的资源管理和调度功能来运行和管理Flink任务。 使用Mesos作为Flink的资源管理器,可以实现以下...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注