阿里云文档 2024-06-25

通过JindoSDK接入OSS-HDFS服务常见问题

本文介绍通过JindoSDK接入OSS-HDFS服务的常见问题和解决方法。

阿里云文档 2024-04-26

通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark了解数据查询和分析的性能表现

TPC-DS作为大数据行业中最权威且被广泛认可的基准测试标准,用于衡量大规模数据处理系统的性能与效率的关键指标。阿里云EMR是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群环境下,充分利用OSS-HDFS服务的优势,成功执行TPC-DS Benchmark的99个SQL查询,并通过一系列优化策略实现更优的性能体验。

Hadoop 分布式文件系统 HDFS

43 课时 |
1096 人已学 |
免费
开发者课程背景图
阿里云文档 2023-12-21

使用OSS-HDFS服务的常见问题和解决方法

本文介绍使用OSS-HDFS服务的常见问题和解决方法。

阿里云文档 2023-12-21

查询OSS-HDFS服务的用量情况

通过OSS管理控制台查询某个Bucket下OSS-HDFS服务的用量情况,不作为计量数据,仅供参考。

阿里云文档 2023-12-21

使用OSS-HDFS服务的Bucket占用情况

OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/ 路径下,并产生相应的OSS存储容量的计量和计费。

问答 2023-01-09 来自:开发者社区

E-MapReduce的HDFS进入安全模式导致HDFS服务不可用如何处理

E-MapReduce的HDFS进入安全模式导致HDFS服务不可用如何处理

文章 2022-02-16 来自:开发者社区

datenode节点超时时间设置,Hadoop启动不正常,HDFS冗余数据块的自动删除,NameNode安全模式问题,ntp时间服务同步,机架感知配置

1.Hadoop datanode节点超时时间设置 datanode进程死亡或者网络故障造成datanode无法与namenode通信,namenode不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长。HDFS默认的超时时长为10分钟+30秒。如果定义超时时间为timeout,则超时时长的计算公式为:       &nb...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。