当前位置:   article > 正文

Hadoop Shell 的基本操作_本关任务:使用hadoop的hdfs系统来上传文件。

本关任务:使用hadoop的hdfs系统来上传文件。

一、实验原理

调用文件系统(FS)Shell命令
使用 hadoop fs <args>形式。

所有的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path

对于HDFS文件系统,scheme是hdfs,对于本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配置中指定的默认scheme。一个HDFS文件或目录比如/parent/child可以表示成hdfs://namenode:namenodeport/parent/child,或者更简单的/parent/child(假设你配置文件中的默认值是namenode:namenodeport)。大多数FS Shell命令的行为和对应的Unix Shell命令类似,出错信息会输出到stderr,其他信息输出到stdout。

二、实验环境

macOS 11.2.3
Hadoop-3.1.4

三、实验内容

1.学习开启、关闭Hadoop

2.学习在Hadoop中创建、修改、查看、删除文件夹及文件

3.学习改变文件的权限及文件的拥有者

4.学习使用shell命令提交job任务

5.Hadoop安全模式的进入与退出

四、实验过程

1.切换到Hadoop路径下,使用start-all.sh启动相关进程。

使用jps查看进程启动情况。

在这里插入图片描述
2.使用hadoop fs -mkdir /test1 在根目录下创建一个test1目录

使用hadoop fs -touchz /test1/file.txt 在刚刚创建的目录下新建一个file.txt

使用hadoop fs -ls -R / 递归地查看根目录下的文件

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/繁依Fanyi0/article/detail/580699
推荐阅读
相关标签
  

闽ICP备14008679号