赞
踩
红帽子RatHat6下hadoop集群模式安装(3个节点,master,slave1,slave2)
一、学习目标:
使用红帽子RatHat6在虚拟机上搭建hadoop集群,包含3个节点,体验集群分布式。
二、软件需求:
三台虚拟机(这里使用VMware Workstation)、RatHat6版本的安装包
三、实验前提:
每台PC机已装有RatHat6系统,一台机命名为master作为namenode,另两台为slave1和slave2,作为datanode。具体配置如下。
用户名 |
Host-IP |
网关 |
HostName(互ping时的机器名) |
内存 |
硬盘 |
HDFS |
YARN |
对应大数据组件 |
备注 |
Master |
172.16.24.38 |
172.16.24.254 |
master |
2 |
40GB |
NameNode |
ResourcesManager |
|
集群主节点 |
Slave01 |
172.16.24.79 |
172.16.24.254 |
slave1 |
1 |
20GB |
DataNode |
NodeManager |
|
计算调度 |
Slave02 |
172.16.24.48 |
172.16.24.254 |
slave2 |
1 |
20GB |
DataNode |
NodeManager |
|
数据计算节点 |
四、Hadoop集群模式安装过程:
1 .用root用户设置主机名和IP地址分配(/etc/hosts)
先在master机器上操作后复制到另两台机上
笔记:修改系统文件时需要以root用户登陆
2.继续使用root用户创建一个hadoop账户并为其设置密码,专门负责操作与hadoop相关的业务。(图片以master机为例,另外两台机上做同样操作)
[命令] useradd hadoop
笔记:用root创建用户会自动创建宿主目录
该步骤情况:三台机器都用root创建了hadoop用户(并且已默认创建了hadoop账户的宿主目录)
[命令] passwd hadoop
笔记:刚创建的用户需要用root用户为其设置密码
该步骤情况:现在三台机器都用root设置了hadoop的密码
3.设置三台机器之间的免密码登陆:(使用hadoop
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。