当前位置:   article > 正文

hadoop之理解tmp目录下的文件_hadoop安装完成后生成tmp和log tmp文件夹下面的内容

hadoop安装完成后生成tmp和log tmp文件夹下面的内容

1)修改tmp路径 解决办法将原来name copy
/home/crx/tmp (这个路径是之前在HADOOP_HOME/etc/hadoop/core-site.xml 中name标签下配置的路径)
(修改目录后,新目录是没有之前的数据的。但之前的目录依旧存在,所以需要将之前目录里的东西拷贝到
新目录里)

2)不删除tmp目录, 直接格式化
格式化HDFS namenode
$>hdfs namenode -format
(格式化namenode 会为namenode重新生成一个clusterID)
解决办法修改clusterID(~/tmp/dfs/name/current/VERSION 按照原datanode secondaryanmenode的clusterID修改)

3)~/tmp 删除掉,重新格式化,原有HDFS的数据全部删除掉

注:(2),(3)都是格式化namenode的方法

4)将SecondaryNameNode中数据拷贝到NameNode存储数据的目录(namenode数据丢失情况)
1、kill -9 NameNode进程
2、删除NameNode存储的数据目录中的数据 (~/tmp/dfs/name/current
3、拷贝SecondaryNameNode中数据到原NameNode存储数据目录
(dfs下有namenode 和secondnamenode,拷贝secondnamenode中的 current给namenode)
4、重新启动NameNode hadoop-daemon.sh start namenode

5)理解停止服务器,开启服务器后fsimage的变化
正在编辑的文件日志后面的数字变大

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/weixin_40725706/article/detail/581564
推荐阅读
相关标签
  

闽ICP备14008679号