实验2_熟悉常用的HDFS操作_hdfs count命令结果

一、实验目的

1. 理解HDFS在Hadoop体系结构中的角色
2. 熟练使用HDFS操作常用的Shell命令
3. 熟悉HDFS操作常用的Java API

二、实验平台

• 操作系统：Ubuntu 18
• Hadoop版本：Hadoop 3.1.3
• JDK版本：1.8
• Java IDE：eclipse

三、实验内容和要求

1. 利用Hadoop提供的Shell命令完成下列任务：

• 向HDFS中上传任意文本文件，如果指定的文件在HDFS中已经存在，由用户指定是追加到原有文件末尾还是覆盖原有的文件。

 ./bin/hdfs dfs -put test.txt test/ 
 ./bin/hdfs dfs -appendToFile local.txt test/test.txt
 ./bin/hdfs dfs -cat test/test.txt
1
2
3

结果

• 从HDFS中下载指定文件，如果本地文件与要下载的文件名称相同，则自动对下载的文件重命名。

if $(./bin/hdfs dfs -test -e /usr/local/hadoop/test.txt);
> then $(./bin/hdfs dfs -copyToLocal test/test.txt ./test.txt);
> else $(./bin/hdfs dfs -copyToL
1
2