Hadoop集群中hive搭建_hadoop集群搭建hive

1. 系统环境
   Oracle VM VirtualBox
   Ubuntu 16.04
   Hadoop 2.7.4
   Java 1.8.0_111

hadoop集群

master：192.168.19.128
slave1：192.168.19.129
slave2：192.168.19.130

MySQL安装在master机器上，hive服务器也安装在master上

hive版本: https://mirrors.cnnic.cn/apache/hive/hive-2.3.0/apache-hive-2.3.0-bin.tar.gz

2.mysql安装

本文使用MySQL作为远程元数据库，部署在master节点上

2.1安装mysql

安装mysql服务端
sudo apt-get install mysql-server
安装mysql客户端
sudo apt-get install mysql-client
期间会有命令窗口会有跳窗提醒输入密码，一定要记住密码，登录Mysql和后续的配置都需要密码。

2.2.查看mysql服务是否启动
sudo netstat -tap | grep mysql

2.3.设置mysql远程访问
a).编辑mysql配置文件，把其中bind-address = 127.0.0.1注释了

sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf
1

b). 使用root进入mysql命令行，执行如下2个命令，示例中mysql的root账号密码就是按照mysql时输入的密码

mysql -u root -p
1

命令窗口会有提示输入密码，即是安装mysql时输入的密码
c).授权root账户，并授予它远程连接的权力

添加一个用户名是root且密码是root的远程访问用户

grant all on *.* to root@'%' identified by 'root' with grant option;
1

d).运行完后紧接着输入，以更新数据库：

FLUSH PRIVILEGES;
1

e).执行quit退出mysql

2.4.重启mysql

/etc/init.d/mysql restart
1

重启成功后，在其他计算机上，便可以登录。

MySQL卸载：

1、sudo apt-get autoremove --purge mysql-server-5.0
2、sudo apt-get remove mysql-server
3、sudo apt-get autoremove mysql-server
4、sudo apt-get remove mysql-common --这个很重要
5、dpkg -l |grep ^rc|awk '{print $2}' |sudo xargs dpkg -P -- 清除残留数据
1
2
3
4
5

3.Hive安装配置

3.1.下载Hive安装包

wget https://mirrors.cnnic.cn/apache/hive/hive-2.3.0/apache-hive-2.3.0-bin.tar.gz
1

3.2.解压

tar -zxfv apache-hive-2.3.0-bin.tar.gz
1

3.3.将解压后的目录移动到自己指定的安装目录

mv apache-hive-2.3.0-bin /home/hadoop/software/
1