问答 2021-12-04 来自:开发者社区

HDFS 中的文件在物理上是分块存储是什么意思?

HDFS 中的文件在物理上是分块存储是什么意思?

问答 2021-12-04 来自:开发者社区

hdfs文件命名空间的结构是什么?

hdfs文件命名空间的结构是什么?

问答 2021-12-04 来自:开发者社区

Hadoop 中如何删除HDFS上已经存在的输出文件?

Hadoop 中如何删除HDFS上已经存在的输出文件?

问答 2021-12-04 来自:开发者社区

Hadoop环境配置中hdfs-site.xml文件的作用是什么呢?

Hadoop环境配置中hdfs-site.xml文件的作用是什么呢?

问答 2021-12-03 来自:开发者社区

Hadoop环境配置中怎么上传测试文件至HDFS系统指定目录呢?

Hadoop环境配置中怎么上传测试文件至HDFS系统指定目录呢?

文章 2021-12-02 来自:开发者社区

Hadoop之HDFS02【上传下载文件原理】

文件上传原理原理步骤:  客户端要向HDFS写数据,首先要跟namenode通信以确认可以写文件并获得接收文件block的datanode,然后,客户端按顺序将文件逐个block传递给相应datanode,并由接收到block的datanode负责向其他datanode复制block的副本    根namenode通信请求上传文件,namenode检查目标文件是否已....

Hadoop之HDFS02【上传下载文件原理】
问答 2021-12-02 来自:开发者社区

请教各位大佬,flink读取hdfs文件时的疑问

flink读取hdfs文件时,FileInputFormat.java类中,acceptFile()方法默认过滤掉了以"_"和"."开头的文件,那如果读入了in-progress文件和.pending文件, 在执行open()方法时,突然in-progress或.pending文件状态发生了改变而导致原来的文件路径消失,会不会出现什么问题?或者是有没有可能出现这种情况? *来自志愿者整理的fl.....

问答 2021-11-07 来自:开发者社区

java应用使用HDFS用于存储文件对象,最近发现上传附件性能越来越慢,该如何优化这个性能问题?

java应用使用HDFS用于存储文件对象,最近发现上传附件性能越来越慢,该如何优化这个性能问题?

问答 2021-10-22 来自:开发者社区

系统集成HDFS后,应用服务启动报错:在 Hadoop二进制文件中找不到可执行文件,一直未解决

系统集成HDFS后,应用服务启动报错:在 Hadoop二进制文件中找不到可执行文件,一直未解决:

文章 2021-08-17 来自:开发者社区

flink写hdfs inprogress文件问题

flink落地到hdfs的文件,在hive中读不到数。查看对应路径下文件为.inprogress文件。原因:.inprogress文件为未完成文件,hive读取不到点开头的文件flink写hdfs,正在写的文件会是.inprogress的,写完成会滚动为正常文件通过withRollingPolicy的DefaultRollingPolicy设置合理的最大文件大小和滚动时间。注意:文件大小如果设置....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

+关注