伪分布式Hadoop和Hive的安装及配置_在hadoop伪分布式集群上部署hive时如何配置mysql

伪分布式Hadoop和Hive的安装及配置

• 安装JDK

yum list | grep jdk #查看yum源

yum -y install java-1.8.0-openjdk* #安装jdk

java -version #验证是否成功安装，安装路径一般在/usr/lib/jvm
1
2
3
4
5

• 安装Hadoop

下载地址：https://archive.apache.org/dist/hadoop/core/

tar -zxvf  hadoop-2.9.2.tar.gz #解压

mv /usr/local/hadoop-2.9.2 /usr/local/hadoop #重命名
1
2
3

• 配置JDK和Hadoop的环境变量

vim /etc/profile

# Add JDK 
export JAVA_HOME=/usr/lib/jvm/java
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/jre/lib/rt.jar

#Add Hadoop
export HADOOP_HOME=.../hadoop #路径为hadoop的解压路径
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

1
2
3
4
5
6
7
8
9
10

并使环境变量生效source /etc/profile

• 配置Hadoop

在…/hadoop目录下新建文件夹tmpmkdir tmp，然后进入配置文件目录 cd .../hadoop/ect/hadoop，复制文件cp mapred-site.xml.template mapred-site.xml，然后进行以下修改

#修改Hadoop启动所需的jdk环境目录
vim hadoop
1