当前位置:   article > 正文

《大数据存储与处理技术(Hadoop)》实验二 熟悉常用的HDFS操作 实验报告_大数据实验2

大数据实验2

实验详细内容及步骤:

查看帮助信息

查看附带详细命令的帮助文档

查看指定文件的详细信息

创建一个目录后再查看文件信息

-h  显示文件大小

-R 递归查看指定目录及子目录

上传文件(因为终端是在hadoop文件夹下打开的,所以上传的是hadoop文件夹下的文件)

再次查看目录下的文件发现上传成功

查看文件内容:

下载文件到本地指定目录

将原始路径的文件拷贝到新的路径下

查看磁盘空间:

查看文件使用的空间

新建文件夹命令:mkdir abc

新建txt文件命令: touch mymove.txt

将HDFS上一个目录中的所有文件合并到一起输出到一个本地文件上

将原始路径的文件拷贝到新的路径下

Mv命令移动文件到指定目录下(可以重命名文件)

修改文件副本个数

删除文件

hadoop fs –rm [-f] [-R|-r][-skipTrash] <path>

-f   如果文件不存在,-f选项将不会显示诊断消息或修改退出状态以反映错误

-R   选项递归地删除目录及其下的任何内容

-skipTrash  选项将绕过垃圾箱(如果启用),并立即删除指定的文件

  1. 向HDFS 中上传任意文本文件,如果指定的文件在 HDFS 中已经存在,由用户指定加到原有文件末尾还是覆盖原有的文件。

检查文件是否存在,执行完上述命令不会输出结果,需要继续输入命令查看结果

文件存在,追加到原文件末尾

  1. 从HDFS中下载指定文件如果本地文件与要下的文件名称相同,则自动对下的件重命名。

  1. 将HDFS中指定文件的内容输出到终端。

  1. 显示HDFS中指定的文件读写权限、大小、创建时间、路径等信息。

  1. 给定 HDFS 中某一个目录,输出该目录下的所有文件的读写权限、大小、创建时间、路径等信息,如果该文件是目录,则递归输出该目录下所有文件相关信息。

  1. 提供一个 HDFS 中的文件的路径,对该文件进行创建和删除操作。如果文件所在目录不存在,则自动创建目录。

创建目录

删除目录

  1. 提供一个 HDFS 的目录的路径,对该目录进行创建和删除操作。创建目录时,如果目文件所在目录不存在则自动创建相应目录;删除目录时,由用户指定当该目录不为空时是否还-除该目录。

目录下无文件时创建并删除

目录下有文件时创建删除显示非空,强制删除

  1. 向HDFS中指定的文件追加内容,由用户指定将内容追加到原有文件的开头或结尾。

追加到文件末尾

追加到文件开头

  1. 删除HDFS中指定的文件。

  1. 在HDFS 中将文件从源路径移动到目的路径。

前面是源路径,后面是目的路径

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/很楠不爱3/article/detail/562283
推荐阅读
相关标签
  

闽ICP备14008679号