DHFS伪分布式_dhfs系统

永久关闭防火墙 #systemctl disable firewalld

网卡开机自启 安装 wget # yum install –y wget

清空源仓库后，安装 Centos7 阿里源 #wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

重新生成 yum 源缓存 # yum makecache

安装 SSH 客户端 # sudo yum -y install openssh-clients openssh-server

 

安装 JDK # sudo yum -y install java-1.8.0-openjdk java-1.8.0-openjdk-devel

 

编辑变量环境 # vim ~/.bashrc export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk

 

执行环境变量 source ~/.bashrc 查看 java 的版本信息,看到下图所示表示配置成功 java -version # $JAVA_HOME/bin/java -version

 

安装 hadoop，如果网速慢把软件包上传即可

wget https://archive.apache.org/dist/hadoop/common/hadoop-2.7.4/hadoop-2.7.4.tar.gz

将 Hadoop 安装到 /usr/local 目录下:

# tar -zxf hadoop-2.7.4.tar.gz -C /usr/local/

cd /usr/local

mv ./hadoop-2.7.4/ ./hadoop

查看 hadoop 版本

/usr/local/hadoop/bin/hadoop version

 

设置 Hadoop 的环境变量

# vim ~/.bashrc

export HADOOP_HOME=/usr/local/hadoop

export HADOOP_INSTALL=$HADOOP_HOME

export HADOOP_MAPRED_HOME=$HADOOP_HOME

export HADOOP_COMMON_HOME=$HADOOP_HOME

export HADOOP_HDFS_HOME=$HADOOP_HOME

export YARN_HOME=$HADOOP_HOME

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native

export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin

执行 Hadoop 的环境变量

source ~/.bashrc

 

进入 hadoop 配置文件，修改配置文件

# cd /usr/local/hadoop/etc/hadoop

# vim core-site.xml

编辑 core-site.xml 文件

 # vim hdfs-site.xml

编辑 hdfs-site.xml 文件

 

 格式化

# /usr/local/hadoop/bin/hdfs namenode -format

通过命令，执行 hadloop

/usr/local/hadoop/sbin/start-dfs.sh

连续输入 root 用户的密码

通过命令，查看状态 四个节点必须全

# jps

 

通过 Web 界面访问 hadloop，查看节点存活情况，能够看到节点存活情况表示搭建成功 #ip 地址:50070

必须关闭防火墙 注意：如果无法访问请再从第十步做一遍，最后通过 jps 查看，回复四个节点信息说明无误

 通过这个选项查看存活节点，配置成功