文章 2025-05-07 来自:开发者社区

Dataphin功能Tips系列(53)-离线集成任务如何合理配置JVM资源

一、场景 某客户需要将mysql中的数据通过集成任务同步至hive,但是按照初始资源配置运行时,出现了OOM,我们在配置集成管道时哪些因素会影响到任务的资源消耗呢,同时我们可以按照什么步骤逐步调整所需要的CPU和内存资源,最终平衡好运行时长和资源利用率呢? 二、解决方案及功能 1. 资源消耗的核心影响因素 数据量(核心因素) ...

Dataphin功能Tips系列(53)-离线集成任务如何合理配置JVM资源
问答 2023-05-24 来自:开发者社区

请问下Dataphin这个有建议配置吗?就是改JVM配置对吧,请教下这个有官方推荐参数吗,因为之前没

请问下Dataphin这个有建议配置吗? 就是改JVM配置对吧,请教下这个有官方推荐参数吗,因为之前没碰到这个错误

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。