完全分布式Hadoop集群的安装搭建和配置（4节点）_现有一个节点,在节点中有解压的hadoop安装包(未配置),若搭建包含4个节点的had

作者：2023面试高手 | 2024-05-18 01:35:49

踩

现有一个节点,在节点中有解压的hadoop安装包(未配置),若搭建包含4个节点的had

Hadoop版本：hadoop-2.5.1-x64.tar.gz

学习参考了给力星http://www.powerxing.com/install-hadoop-cluster/的两个节点的hadoop搭建过程，我用VirtualBox开了四个Ubuntu（版本15.10）虚拟机，搭建了四个节点的Hadoop分布式集群，并配置了HA，适合首次搭建的同学参考，节点设计如下：

一、准备工作

在Master节点完成基本工作，包括配置Hadoop用户，安装配置ssh，安装配置java环境，这个阶段给力星同学写得很详细，每一步都有解释。

1、新建hadoop用户

建议安装虚拟机时使用hadoop用户名，如果不是，新增一个hadoop用户：

sudo useradd -m hadoop -s /bin/bash

为hadoop用户设置密码，建议所有密码都设置为hadoop：

sudo passwd hadoop

为hadoop用户增加管理员权限：

sudo adduser hadoop sudo

最后注销当前用户（点击屏幕右上角的齿轮，选择注销），在登陆界面使用刚创建的 hadoop用户进行登陆。用 hadoop 用户登录后，我们先更新一下 apt，方便后续安装软件：

sudo apt-get update

安装Vim进行文本编辑：

sudo apt-get install vim

2、安装配置ssh

集群、单节点模式都需要用到 SSH 登陆（类似于远程登陆，你可以登录某台 Linux 主机，并且在上面运行命令），Ubuntu 默认已安装了 SSH client，此外还需要安装 SSH server：

sudo apt-get install openssh-server

配置ssh无密码登录的步骤我们后边再做。

3、安装配置java环境

直接通过命令安装 OpenJDK7：

sudo apt-get install openjdk-7-jre openjdk-7-jdk

安装好 OpenJDK 后，需要找到相应的安装路径，这个路径是用于配置 JAVA_HOME 环境变量的。执行如下命令：

dpkg -L openjdk-7-jdk | grep '/bin/javac'

该命令会输出一个路径，除去路径末尾的 “/bin/javac”，剩下的就是正确的路径了。如输出路径为/usr/lib/jvm/jav

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/2023面试高手/article/detail/586089