Linux下安装配置Hadoop

一. 安装配置JDK

1.安装JDK

apt-get install openjdk-7-jdk
1

2.配置java环境变量

vim /etc/profile
1

然后输入以下代码

export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-i386
export JRE_HOME=$JAVA_HOME/jre
export HADOOP_HOME=/opt/hadoop-1.2.1
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
1
2
3
4
5
6

编辑完成后按Esc，然后输入!wq保存退出，如果此布提示不可以编辑，那么文件以 sudo vim /etc/profile 的方式打开 ，输入密码，然后编辑保存即可

---

二. 安装配置Hadoop

1.下载hadoop

先下载

wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
1

把文件移动到/opt/文件下
mv hadoop-1.2.1.tar.gz /opt/

进入/opt/文件，然后解压缩

cd /opt/
tar -zxvf hadoop-1.2.1.tar.gz

2.配置hadoop

在/opt/hadoop-1.2.1 下面进入目录
cd conf

需要修改4个配置文件

• hadoop-env.sh

  vim hadoop-env.sh

  然后添加java的安装路径

• core-site.xml
  vim core-site.xml

  然后添加

<property>
  <name>hadoop.tmp.dir</name>
  <value>/hadoop</value>
</property>
<property>
  <name>fs.default.name</name>
  <value>hdfs://master:9000</value>
</property>
<property> 
  <name>dfs.name.dir</name>           
  <value>/hadoop/name</value> 
</property>
1
2
3
4
5
6
7
8
9
10
11
12

• hdfs-site.xml

<property>
    <name>dfs.replication</name>  
    <value>3</value>
</property>
<property>
    <name>dfs.data.dir</name>  
    <value>/hadoop/data</value>
</property>
1
2
3
4
5
6
7
8

• mapred-site.xml

<property>
    <name>mapred.job.tracker</name>  
    <value>master:9001</value>
</property>
<property>
    <name>mapred.system.dir</name>  
    <value>/hadoop/mapred_system</value>
</property>
<property>
    <name>mapred.local.dir</name>  
    <value>/hadoop/mapred_local</value>
</property>
1
2
3
4
5
6
7
8
9
10
11
12