[帮助文档] 通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark了解数据查询和分析的性能表现

TPC-DS作为大数据行业中最权威且被广泛认可的基准测试标准,用于衡量大规模数据处理系统的性能与效率的关键指标。阿里云EMR是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群环境下,充分利用OSS-HDFS服务的优势,成功执行TPC-DS Benchmark的9...

[帮助文档] 导出OSS-HDFS服务审计日志

OSS-HDFS服务端记录了客户端请求的查询、修改、删除文件元数据的操作审计日志。 您可以通过审计日志,了解OSS-HDFS服务操作审计、访问统计以及异常请求等情况。

Hadoop 分布式文件系统 HDFS

43 课时 |
945 人已学 |
免费
开发者课程背景图

[帮助文档] 使用OSS-HDFS服务的常见问题和解决方法

本文介绍使用OSS-HDFS服务的常见问题和解决方法。

[帮助文档] 查询OSS-HDFS服务的用量情况

通过OSS管理控制台查询某个Bucket下OSS-HDFS服务的用量情况,不作为计量数据,仅供参考。

[帮助文档] 使用OSS-HDFS服务的Bucket占用情况

OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/ 路径下,并产生相应的OSS存储容量的计量和计费。

手把手教你使用OSS-HDFS服务平替自建HDFS

手把手教你使用OSS-HDFS服务平替自建HDFS

1. 服务介绍OSS-HDFS服务是一款基于对象存储OSS之上的云原生数据湖3.0存储产品,基于统一的元数据管理能力,在完全兼容 HDFS 文件系统接口的同时,提供充分的 POSIX 能力支持,能更好的满足大数据和 AI 领域丰富多样的数据湖计算场景。通过OSS-HDFS服务,无需对现有的 Hado...

集成 Hadoop 服务(HDFS、YARN)| 学习笔记

集成 Hadoop 服务(HDFS、YARN)| 学习笔记

开发者学堂课程【Hue 大数据可视化终端课程:集成 Hadoop 服务(HDFS、YARN)】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/719/detail/12849集成 Hadoop 服务(H...

容器服务预测服务利用 TFRecord 和 HDFS 准备 TensorFlow 训练数据

数据准备和预处理在一个深度学习训练过程中扮演着非常重要的角色,它影响着模型训练的速度和质量。 而 TensorFlow 对于 HDFS 的支持,将大数据与深度学习相集成,完善了从数据准备到模型训练的完整链条。在阿里云容器服务深度学习解决方案中,为 TensoFlow 提供了 OSS、NAS 和 HD...

记录ALiYun EMR常用服务的手动启动和停止命令(hdfs/yarn/mr-jobhistory/zk/spark-history)

说明:在ssh,用root用户登录到header(master)机器上,手工执行以下命令进行业务调试。 常用命令: 1. env  (忘记是大写ENV,还是小写env,来查看环境变量) 2. cat /etc/hosts (查看EMR集群机器的hostname ip配置) 3. 在head...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

相关电子书
更多
海量数据分布式存储——Apache HDFS之最新进展
立即下载