当前位置:   article > 正文

Hadoop(04) HDFS编程实践操作_使用vim编辑器,在本地linux文件系统的“ home hadoop ”目录下创建一个文件 (1)_创建1.txt文件并上传到hdfs中

创建1.txt文件并上传到hdfs中

先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7

深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新Linux运维全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上运维知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以添加V获取:vip1024b (备注运维)
img

正文

./bin/hdfs dfs -mkdir /input33333
  • 1

列出hdfs根目录下文件的命令:

./bin/hdfs dfs -ls /
  • 1

1.1.3 删除目录

可以使用rm命令删除一个目录,比如,可以使用如下命令删除刚才在HDFS中创建的“/input33333”目录(不是“/user/hadoop/input22222”目录):

./bin/hdfs dfs -rm -r /input33333
  • 1

上面命令中,“-r”参数表示如果删除“/input”目录及其子目录下的所有内容,如果要删除的一个目录包含了子目录,则必须使用“-r”参数,否则会执行失败。

1.2 文件操作

在实际应用中,经常需要从本地文件系统向HDFS中上传文件,或者把HDFS中的文件下载到本地文件系统中。
首先,使用vim编辑器,在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件myLocalFile.txt,里面可以随意输入一些单词,比如,输入如下三行:

Hadoop

Spark

JavaWeb

1.2.1 本地上传文件到HDFS

然后,可以使用如下命令把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下,也就是上传到HDFS的“/user/hadoop/input/”目录下:

hdfs dfs -put /home/hadoop/myLocalFile.txt input22222 # 设置了PATH变量的话可以直接使用hdfs命令
hdfs dfs -ls input22222  # 查看文件是否上传成功
  • 1
  • 2

查看input22222文件夹中的内容:

hdfs dfs -ls input22222
  • 1

查看HDFS中的myLocalFile.txt这个文件的内容:

hdfs dfs -cat input22222/myLocalFile.txt

如果没有设置PATH路径,使用如下命令
cd /usr/local/hadoop-3.3.6
./bin/ hdfs dfs -cat input22222/myLocalFile.txt
  • 1
  • 2
  • 3
  • 4
  • 5

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/2023面试高手/article/detail/650810
推荐阅读
相关标签
  

闽ICP备14008679号