阿里云文档 2026-01-13

创建SPARK_ON_YARN离线任务-智能数据建设与治理 Dataphin-阿里云

本文为您介绍如何基于Dataphin新建Spark on Yarn类型的任务。

阿里云文档 2026-01-13

使用HIVE_SQL开发离线计算任务-智能数据建设与治理 Dataphin-阿里云

本文为您介绍如何基于Dataphin构建Hive SQL类型的离线计算任务。

文章 2025-03-13 来自:开发者社区

Dataphin功能Tips系列(48)-如何根据Hive SQL/Spark SQL的任务优先级指定YARN资源队列

一、场景 客户A需要对生产和开发环境的Hive SQL/Spark SQL根据任务优先级指定YARN资源队列,提高任务执行效率和资源利用率,在Dataphin上如何实现? 二、解决方案及功能 Dataphin支持根据任务优先级指定YARN资源队列 ①【计算源-队列信息配置】配置资源队列,具体可以联系Hadoop的运维团队或者是从yarn-site.xml中获取资源...

Dataphin功能Tips系列(48)-如何根据Hive SQL/Spark SQL的任务优先级指定YARN资源队列
问答 2023-11-06 来自:开发者社区

Dataphin dp hive数据源调整jdbc url和keytab之前提交的任务有影响吗?

Dataphin dp hive数据源调整jdbc url和keytab之前提交的任务有影响吗?

阿里云文档 2023-05-01

问题描述Dataphin提交至hive中的任务执行时间过长。具体情况如下:Dataphin日志显示2023-04-23 13:47:02.509 至 2023-04-23 13:51:34.297这4分32秒任务是在hive中执行;查看yarn日志 ,hive执行的时间只有28秒;还有4分4秒耗费在...

阿里云文档 2023-03-31

问题描述Dataphin代码任务报错Caused by: org.apache.hive.service.cli.HiveSQLException: Error while compiling statement: FAILED: ParseException line 3:28 cannot re...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐