【大数据】hadoop运行环境搭建（搭建如此简单）_hadoop环境搭建

作者：知新_RL | 2024-05-21 03:46:25

踩

hadoop环境搭建

目录

前言
一、模板虚拟机Hadoop100环境准备
1. 改为静态IP(云服务器不要改)
2. 建立主机名映射
3. 远程连接
4. 安装软件包
5. 关闭防火墙及其开机自启
6. 添加root权限（后面选择root用户登录的话可以不修改）
7. 在/opt 目录下创建文件夹
8. 卸载虚拟机自带的openJDK
9. 重启虚拟机

二、克隆虚拟机
三、在hadoop102上安装JDK&hadoop
1. 安装JDK
2. 安装hadoop3.3.6

总结

前言

首先准备好工具。下载好最新的VMware Workstation，CentorOS 7运行Linux，建议Linux桌面标准版，且创建好一个用户

一、模板虚拟机Hadoop100环境准备

安装模板虚拟机。IP地址192.168.150.100（自定义）、主机名称hadoop100、内存4G、硬盘50G，嘎嘎重要，一步一步来完成

1. 改为静态IP(云服务器不要改)

vim /etc/sysconfig/network-scripts/ifcfg-ens33进入配置文件（想不起来用tab键查找）
更改内容示例如下(最后的IP地址等依照自身情况做更改)：

BOOTPROTO="static"
…
IPADDR=192.168.150.100
GATEWAY=192.168.150.2
DSN1=192.168.150.2

2. 建立主机名映射

Linux系统
进入配置文件vim /etc/hosts，加上主机名及其对应IP地址
或者
echo "192.168.150.100 hadoop100" >> /etc/hosts
再进windows系统C:\Windows\System32\drivers\etc同样修改hosts文件

如果主机名不是hadoop100可通过echo "hadoop100" > /etc/hostname来修改，reboot重启即可，如不想重启就执行hostnamectl并新开一个终端

3. 远程连接

ssh root@主机名远程连接Linux系统
下载Xshell或者finalshell或者windows终端，本文使用的是windows终端

检查网络是否连接 ping www.csdn.com

4. 安装软件包

yum install -y epel-release

Extra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包

5. 关闭防火墙及其开机自启

关闭防火墙：systemctl stop firewalld
关闭开机自启：systemctl disable firewalld.service

6. 添加root权限（后面选择root用户登录的话可以不修改）

root用户vim /etc/sudoers第91行加上该用户名 ALL=(ALL) NOPASSWD: ALL，由于是只读文件，退出时wq!
或者
将用户usermod -g wheel 该用户名 添加到wheel组中，加上NOPASSWD即可

7. 在/opt 目录下创建文件夹

创建文件夹

mkdir /opt/module
mkdir /opt/software
1
2

修改所有者、所属组（后面选择root用户登录的话可以不修改）

chown ygy:ygy /opt/module
chown ygy:ygy /opt/software
1
2

最后 ll 查看修改情况

8. 卸载虚拟机自带的openJDK

为什么要卸载openJDK?
是因为现在很多公司都用JDK，开发项目需要统一的标准，而且对于一些一直用JDK，对openJDK不是特别了解的朋友来说，openJDK不用为好，毕竟和官网JDK稍微不太一样，难免在开发中遇到一些问题，这样会大大增加项目的不可控风险

先检查虚拟机是否自带了JDK：rpm -qa | grep -i java
一键删除操作：rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps

解释：
rpm -qa 查询安装的所有rpm软件包
grep -i 忽略大小写
xargs -n1 表示每次只传递一个参数
rpm -e --nodeps 忽略依赖关系强制删除软件

9. 重启虚拟机

# 重启
reboot
1
2

没有改好就再改，重启到改好为止
声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/知新_RL/article/detail/600688