当前位置: article > 正文

上传文件到HDFS_把txt文件上传到hdfs上

作者：正经夜光杯 | 2024-07-19 16:43:14

踩

把txt文件上传到hdfs上

hdfs -dfs -mkdir -p /opt/mydoc

hdfs -dfs -ls /opt

注意改文件夹是创建在hdfs中的，不是本地，查看本地/opt，并没有该文件夹。

hdfs dfs -put -f file:///usr/local/testspark.txt hdfs://master:9000/opt/mydoc

hdfs dfs -ls /opt/mydoc

也可以在浏览器中查看

mkdir: ‘/opt/mydoc‘: Input/output error

应该是hdfs配置的问题，一开始在安装spark环境时没有配置hadoop相关文件，参考Spark Standalone模式部署-CSDN博客第三章，安装配置好hadoop并启动，再次执行上述命令时，成功。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/正经夜光杯/article/detail/852483