赞
踩
介绍hadoop的目录
首先进入hadoop查看目录
挑重要的介绍
bin目录是Hadoop最基本的管理脚本和使用脚本所在的目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop
存放的是我们管理脚本的所在目录,重要是对hdfs和yarn的各种开启和关闭和单线程开启和守护
文件名称 | 作用 |
---|---|
hadoop-daemon.sh | 通过执行hadoop命令来启动/停止一个守护进程(daemon);他可以单独开启一个进程也可以使用hadoop-daemons来开启多个进程,这样我们在某台机器挂掉时,就不用全部重新开启了 |
start-all.sh | 调用 start-dfs.sh和start-yarn.sh(官方不建议使用) |
stop-all.sh | 调用 stop-dfs.sh和stop-yarn.sh(官方不建议使用) |
start-dfs.sh | 启动NameNode ,SecondaryNamenode ,DataNode这些进程 |
start-yarn.sh | 启动ResourceManager,nodeManager 这些进程 |
stop-dfs.sh | 关闭NameNode ,SecondaryNamenode ,DataNode这些进程 |
stop-yarn.sh | 关闭ResourceManager,nodeManager 这些进程 |
stop-balancer.sh | 停止balancer |
stop-mapred.sh | 停止MapReduce |
存放一些hadoop的配置文件
文件名称 | 作用说明 |
---|---|
core-site.xml | Hadoop核心全局配置文件,可以其他配置文件中引用该文件中定义的属性,如在hdfs-site.xml及mapred-site.xml中会引用该文件的属性;该文件的模板文件存在于$HADOOP_HOME/src/core/core-default.xml,可将模板文件复制到conf目录,再进行修改。 |
hadoop-env.sh | Hadoop环境变量 |
hdfs-site.xml | HDFS配置文件,该模板的属性继承于core-site.xml;该文件的模板文件存于$HADOOP_HOME/src/hdfs/hdfs-default.xml,可将模板文件复制到conf目录,再进行修改 |
mapred-site.xml | MapReduce的配置文件,该模板的属性继承于core-site.xml;该文件的模板文件存于$HADOOP_HOME/src/mapred/mapredd-default.xml,可将模板文件复制到conf目录,再进行修改 |
slaves | 用于设置所有的slave的名称或IP,每行存放一个。如果是名称,那么设置的slave名称必须在/etc/hosts有IP映射配置 |
该目录下存放的是Hadoop运行时依赖的jar包,Hadoop在执行时会把lib目录下面的jar全部加到classpath中。
该目录存放的是Hadoop运行的日志,查看日志对寻找Hadoop运行错误非常有帮助。
对外提供的编程库头文件(具体动态库和静态库在lib目录中),这些头文件均是用C++定义的,通常用于C++程序访问HDFS或者编写MapReduce程序。
各个服务对用的shell配置文件所在的目录,可用于配置日志输出、启动参数(比如JVM参数)等基本信息。
Hadoop各个模块编译后的jar包所在的目录。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。