当前位置:   article > 正文

Hadoop安装记录(伪分布式)_hadoop伪分布式安装林子雨

hadoop伪分布式安装林子雨

下面给大家分享一下我在安装Hadoop时候的一些步骤记录,希望能给大家带来帮助,我安装的是单节点的伪分布式。

      1.基本环境:VMware8.0 + CentOS 6.0

  2.软件版本:hadoop-0.20.2-cdh3u1.tar.gz + jdk-6u29-linux-i586.bin

 

第一步,将所需要的软件从本地共享到虚拟机,我们可以使用VMware Tools的Share共享文件夹功能

      我们在/usr下新建/hadoopsoft文件夹,把需要的软件拷贝进去:

 

 

第二步,安装jdk

     首先改变hadoopsoft目录为可执行目录,并安装jdk

 

第三步,安装hadoop

 

第四步,创建hadoop的用户组,并创建相应用户hadoopuser

 

第五步,配置环境变量

     打开/etc/profile:

配置完环境变量以后需要重启一下CentOS,然后验证是否成功:

 

第六步,配置SSH免登陆认证

如果配置不成功需要赋予authorized_keys相应的权限!

 

第七步,配置hadoop配置文件

  1.hadoop-env.sh 为hadoop添加java环境变量

(为了一下配置的方便,我们先为ip配置一个host)

同时也要修改/hadoop/conf下的masters和slaves文件,修改成相应的host名。

  2.core-site.xml

  3.mapred-site.xml

 

第八步,为hadoopuser用户赋予hadoop文件夹的使用权限

 

第九步,格式化namenode

如果格式化不成功,需要删除hadoop临时文件夹下的文件,然后重新执行namenode格式化:

 

第十步,启动hadoop

如果这些节点都已经启动,则代表hadoop已经正常启动,通过在浏览器里查看:

 

以上就是我在安装单节点hadoop的配置过程,如有什么疑问欢迎下方跟评论!

声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:【wpsshop博客】
推荐阅读
相关标签
  

闽ICP备14008679号