问答 2024-08-26 来自:开发者社区

flinkcdc在读取pg数据时,算子消耗内存过大,该怎么设置可以取消掉这个算子?

请教下,flinkcdc在读取pg数据时,将changelog-mode设置为upsert时会出现一个ChangelogNormalize的算子,且算子消耗内存过大,写入的目标端是有主键的,理论上不需要这个算子,该怎么设置可以取消掉这个算子

问答 2023-03-29 来自:开发者社区

有遇到tidb往sr同步时,flinkcdc把tidb的数据全部加载到内存中才开始sink的吗?

大佬们,有遇到tidb往sr同步时,flinkcdc把tidb的数据全部加载到内存中才开始sink的吗?

问答 2022-09-21 来自:开发者社区

flinkcdc查询oracle的scn数据把内存查爆了,这个有办法解决吗

flinkcdc查询oracle的scn数据把内存查爆了,这个有办法解决吗

阿里云文档 2022-05-07

tab组件从同一数据源的两个数据集里获取数据时内存的使用情况

概述Quick BI中tab组件,分别从同一个数据源的两个数据集里获取数据,使用内存相同吗?数据源是Hologres,两个数据集由同一张表里创建。详细信息Quick BI中tab组件,如果从同一个数据源的两个数据集里获取数据,那么使用相同的内存。适用于Quick BI

阿里云文档 2021-08-30

管道任务中需要同步大量数据时内存设置上限

概述描述管道任务中需要同步大量数据时内存设置上限的方法。用户通过管道任务要将大量的文件进行同步,这个内存要如何调整?详细信息在管道任务的通道配置中,JVM配置可以设置运行内存,最大可以设置为8G。当管道任务同步数据较多时,可以JVM设置较大的内存。适用于Dataphin

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐