问答 2024-06-12 来自:开发者社区

Flink处理能力怎么评估

Flink处理能力怎么评估

问答 2023-12-04 来自:开发者社区

Flink CDC如何评估运行任务与资源需求的关系呀?

Flink CDC如何评估运行任务与资源需求的关系呀?

基于阿里云Hologres&Flink实时计算平台搭建数据仓库(实时)

23 课时 |
320 人已学 |
免费

实时数据分析:使用Flink实时发现最热Github项目

1 课时 |
947 人已学 |
免费

实时数据接入:5分钟上手 Flink MySQL 连接器

1 课时 |
512 人已学 |
免费
开发者课程背景图
问答 2023-12-01 来自:开发者社区

怎么评估生产跑flink cdc的服务器配置,多大的数据量对应什么样的配置有没有什么标准?

怎么评估生产跑flink cdc的服务器配置,多大的数据量对应什么样的配置有没有什么标准?

问答 2023-11-23 来自:开发者社区

使用Flink CDC,生产环境要申请的服务器如何评估

基于Hadoop Yarn去使用Flink cdc,想申请生产环境的服务器,目前遇到的问题是:不知如何评估对应的服务器配置,评估标准是什么?有什么评估标准吗,根据总数据量还是增量数据,又或者是Job的数量?cpu、内存、硬盘的大小又该如何评估?

文章 2023-11-23 来自:开发者社区

使用Flink CDC,生产环境要申请的服务器如何评估

使用Flink CDC在生产环境中申请服务器时,需要考虑以下几个因素来确定合理的硬件配置: 总数据量和增量数据量:这两个指标决定了处理任务所需的内存大小和磁盘空间大小。一般来说,内存应足够大以便能够存储整个数据流,而磁盘空间则应该足以容纳一段时间内的所有增量数据。Job数量:在使用Flink CDC处理多个Job...

问答 2023-11-15 来自:开发者社区

生产环境要怎么评估Flink CDC的服务器配置?

生产环境要怎么评估Flink CDC的服务器配置?

问答 2023-01-09 来自:开发者社区

请教下,有个场景评估用flink实现是否可行, 数据:几千万用户的位置数据 需求:每10分钟内,每个

请教下,有个场景评估用flink实现是否可行, 数据:几千万用户的位置数据 需求:每10分钟内,每个用户,只保留一条最新的位置数据 方法1:sink到redis,实时更新 方法2:按用户分组,开窗10min,比较该用户下所有位置数据,只取最新的一条,但10分钟能sink几千万条数据么

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注