问答 2024-07-11 来自:开发者社区

我们对holo 进行计数,不指定cdc 模式,增加列导致数据又被计算了一次。Flink这个合理吗?

我们对holo 进行计数,不指定cdc 模式,增加列导致数据又被计算了一次。Flink这个算是合理的吗?

问答 2024-06-24 来自:开发者社区

Flink综合判断这个任务资源分配是否合理并给出建议?

Flink现在市面上或者大家公司内部有没有那种智能分析调优工具 比如检查任务状态大小 tm slot数量 内存分配大小 综合判断这个任务资源分配是否合理并给出建议?

基于阿里云Hologres&Flink实时计算平台搭建数据仓库(实时)

23 课时 |
324 人已学 |
免费

实时数据分析:使用Flink实时发现最热Github项目

1 课时 |
962 人已学 |
免费

实时数据接入:5分钟上手 Flink MySQL 连接器

1 课时 |
519 人已学 |
免费
开发者课程背景图
问答 2024-06-12 来自:开发者社区

Flink维表缓存时间如何合理设置

Flink维表缓存时间如何合理设置

问答 2024-03-19 来自:开发者社区

Flink CDC 里3台768G内存的机器跑1000个flink job合理吗?

Flink CDC 里3台768G内存的机器跑1000个flink job合理吗?怎么配置都跑不起来呀?yarn配置了很高的虚拟内存,已经超出物理的内存了,flink任务jobmanager.process.size=1024超出物理内存配置现在,能跑起来880个,但是会出现任务分配不均的情况,可能第二台服务器还剩下10g内存,其他的服务器还剩100g,Swap一共才31g,直接拉满了,大佬有啥....

问答 2024-03-11 来自:开发者社区

Flink CDC 里这样合理吗?

Flink CDC 里这样合理吗?写死啥意思啊,不是说多并行度的时候,需要一个范围吗?你的意思是,如过写死为 5000,内部会根据并行度自动生成 5001, 5002.. , 是吗?那我的并行度可能改变啊,比如20调整为10什么的? If you would like the source run in parallel, each parallel reader should have an ....

问答 2024-01-04 来自:开发者社区

我使用Flink cdc整库同步mysql,之前设置多表同步101个表, 这种state是否合理?

我使用Flink cdc整库同步mysql,之前设置多表同步101个表, 今天新增了1个表,然后重新部署,我还是沿用之前的状态(“有状态启动”),发现在holo这边会新建这个新增的表, 但是数据没写入, 这种state是否合理?还是说每次新增表都要使用“无状态启动”,才能写数据

问答 2023-12-04 来自:开发者社区

正在通过flink cdc 做一张宽表。因为需要的字段都分散在很多表里面,我这样写合理吗?

正在通过flink cdc 做一张宽表。因为需要的字段都分散在很多表里面,所以join 很多。现在是每个表都给他建一个flink 表,然后在join。 我这样写合理吗?

问答 2023-12-01 来自:开发者社区

Flink CDC数据库中有大约1亿的数据,jobmanager配置多大的内存合理些?

Flink CDC数据库中有大约1亿的数据,jobmanager配置多大的内存合理些,一张表总共接近一亿的数据,每天增量大概几十万左右,想根据这种方式来评估下要申请的服务器配置,还请大佬指点一下?

问答 2023-05-23 来自:开发者社区

Flink中有个场景,比如快递, 既有发货时间,又有收货时间, 我怎么样设计一张表比较合理 , 既?

Flink中有个场景,比如快递, 既有发货时间,又有收货时间, 我怎么样设计一张表比较合理 , 既能算某天发了多少快递,也能算某天收了多少快递?按发货时间分区 算收了多少快递时就得全量, 反过来,按收货时间分区, 算发了多少快递就得全量,按累计快照型做了 有些指标得全量算了,两个分区字段,一个收发类型,一个收发时间

问答 2022-09-20 来自:开发者社区

flink批处理,一次性读多少数据合理,怎么分批读

flink批处理,一次性读多少数据合理,怎么分批读

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。