当前位置:   article > 正文

Linux搭建完全分布式HDFS(CentOS 6.5)_在linux搭建hdfs

在linux搭建hdfs

一、配置环境

1.准备四台虚拟机(CentOS 6.5),为方便后续操作,分别修改主机名为node01,node02,node03,node04
(node01作为NameNode节点,node02作为SecondaryNameNode和DataNode,node03、node04作为DataNode)
2.Hadoop-2.6.5
3.jdk1.8.0_151

二、搭建完全分布式

搭建前请先查看第三步,注意事项。
1.时间同步
将四台虚拟机的时间进行同步。首先以root用户进入。

①	各个节点安装ntp命令yum install ntp
②	上网查找最新的时间服务器ntp1.aliyun.com
③	同步时间ntpdate ntp1.aliyun.com

  • 1
  • 2
  • 3
  • 4

2、配置免密登录

node01->node01  node01->node02  node01->node03 node01->node04
①	所有节点执行  ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
②	在node01节点执行,将node01的公钥加入到其他节点的白名单中  ssh-copy-id -i ~/.ssh/id_rsa.pub root@node01
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node02
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node03
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node04

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7

3、在每个节点配置JDK
在每个

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/繁依Fanyi0/article/detail/1002506
推荐阅读
相关标签
  

闽ICP备14008679号