阿里云文档 2024-09-06

如何使用AnalyticDB MySQL湖仓版Spark访问Hive数据

云原生数据仓库 AnalyticDB MySQL 版Spark支持通过Thrift协议和JDBC协议访问Hive数据。您也可以对Hive数据源启用Kerberos认证,确保只有经过Kerberos认证的客户端能够访问集群、正常提交作业,以此保证数据安全性。本文以E-MapReduce集群的Hive服务为例,介绍访问Hive数据源的方法。

问答 2024-06-01 来自:开发者社区

E-MapReduce开启使用DLF统一元数据后本地开发spark程序想访问emr hive中...

E-MapReduce开启使用DLF统一元数据后本地开发spark程序想访问emr hive中的表元数据连接要怎么配置

阿里云文档 2023-07-13

在EMR Hive或Spark中访问OSS-HDFS

EMR-3.42及后续版本或EMR-5.8.0及后续版本的集群,支持OSS-HDFS(JindoFS服务)作为数据存储,提供缓存加速服务和Ranger鉴权功能,使得在Hive或Spark等大数据ETL场景将获得更好的性能和HDFS平迁能力。本文为您介绍E-MapReduce(简称EMR)Hive或Spark如何操作OSS-HDFS。

阿里云文档 2022-12-13

如何通过在CDP集群中部署JindoSDK4.5.0访问OSS-HDFS服务相关操作

本文介绍如何通过在CDP集群中部署JindoSDK(4.5.0),访问OSS-HDFS服务相关操作。

阿里云文档 2022-08-30

EMRHive或Spark如何操作OSS-HDFS

EMR-3.42及后续版本或EMR-5.8.0及后续版本的集群,支持OSS-HDFS(JindoFS服务)作为数据存储,提供缓存加速服务和Ranger鉴权功能,使得在Hive或Spark等大数据ETL场景将获得更好的性能和HDFS平迁能力。本文为您介绍E-MapReduce(简称EMR)Hive或Spark如何操作OSS-HDFS。

问答 2022-04-15 来自:开发者社区

hadoop HA 集群中使用zeppline的Spark sql访问Hive数据失败

报错信息如下:

问答 2022-04-15 来自:开发者社区

在Zeppelin中,使用spark sql访问不到hive的表是怎么回事

如题。在Zeppelin中,使用spark sql访问不到hive的表是怎么回事

问答 2022-02-15 来自:开发者社区

请问spark jdbc方式访问Hive 为啥本地的可以,远程的就不可以

没有在加任何xx.xml文件,远程测试如此 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。点击链接欢迎加入感兴趣的技术领域群

问答 2022-02-15 来自:开发者社区

当数据存储在对象存储中时,从Spark SQL访问Hive表

我使用spark数据帧编写器在IBM Cloud Object Storage中以parquet 格式在内部hive表中编写数据。所以,我的hive Metastore在HDP集群中,我从HDP集群运行spark作业。此spark作业将数据以parquet 格式写入IBM COS。这就是我开始saprk session的方式 SparkSession session = SparkSession....

阿里云文档 2022-01-27

提交Spark任务报错UnabletoinstantiateSparkSessionwithHivesupportbecauseHiveclassesarenotfound.

问题描述Dataphin中提交Spark任务报错“Unable to instantiate SparkSession with Hive support because Hive classes are not found.”是什么原因?问题原因用户使用的计算引擎是hadoop集群,任务执行机器信...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐