当前位置:   article > 正文

Hadoop 安装后验证_验证已安装的hadoop平台上的hdfs、yarn和mapreduce服务

验证已安装的hadoop平台上的hdfs、yarn和mapreduce服务

准备工作

格式化hdfs: hadoop namenode -format  ,这是一个过时的命令,不过也可以使用
启动hadoop: start-all.sh ,这也是一个过时的命令,不过用起来很方便

查看进程

执行jps命令(不包括jps应该有5个进程)
        NameNode
        SecondaryNameNode
        DataNode
        JobTracker
        TaskTracker

NameNode:HDFS管理节点
DataNode:HDFS工作节点
SecondaryNameNode:NameNode备份节点
JobTracker:MapReduce任务分发节点
TaskTracker:MapReduce任务处理节点

通过浏览器验证

IP根据实际情况换成自己的IP
hdfs管理界面:http://192.168.8.88:50070
yarn管理界面:http://192.168.8.88:8088

验证HDFS

测试上传文件到hdfs:
hadoop fs -put /root/jdk---.gz hdfs://itcast01:9000/jdk
测试从hdfs下载文件:
hadoop fs -get hdfs://itcast01:9000/jdk /home/jdk1.7

验证mapreduce

前提是你的hdfs上面有word .txt这个文件,然后运行jar包,执行wordcount,将结果输出到wcout.txt文件中
hadoop jar hadoop-mapreduce-------example --2.2.0.jar  wordcount  hdfs://itcast01:9000/word hdfs://itcast01:9000/wcout

 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/运维做开发/article/detail/980099
推荐阅读
相关标签
  

闽ICP备14008679号