赞
踩
网上已经有相当多的zookeeper和hbase的安装教程了。那为什么总是在安装的时候,还是可以遇到那么多问题。
搭建一个自己的大数据平台,手把手安装大数据相关组件,从组件的版本匹配,组件源下载,再到着手解压配置。一个环境搭建下来,我发现我可能需要浏览数几十个页面,才能真的完成我的搭建流程。鉴于之前在学习的过程中,曾经给一位朋友写了一份非常详细的hadoop集群搭建的说明书。记录一下这一次在从最基础的hadoop集群搭建,到各个组件的安装配置。由于精力有限,不时将会将原先搭建hadoop的说明说上传上来。需者自取。
这里便不会再赘述hadoop集群搭建的内容。本次的记录主要以安装hbase为主。
zookeeper的版本能新就新,其他组件的版本,我是这么配置的,此处只做一个参考,网上有详细的版本匹配表。当然你也可以去官网直接看。(我就是这么干的)
版本搭配:hadoop-2.7.6+hbase-2.4.4 +jdk1.8+zookeeper-3.7.0
官网就可以找到下载的文件。直接百度搜就行。
不再赘述本次的配置问题。这里直接上我的详细的配置过程。
阐述一下我的文件构成形式。
我所有的内容都在/opt的文件夹下。又分做了module和software文件。module作为文件安装目录。software主要用来装要安装的文件的压缩包的。
这是software:
这是module:(目前只安装了这些内容。)
命令:tar -zxvf hbase-2.4.4-bin.tar.gz -C /opt/module
找到我们解压好的文件:
关于环境变量:可配可不配。我这里配置了。方便了后期启动的操作。这里说一句,不然以后后面的直接敲指令启动还以为是正常的。
– 根据自己的文件位置,做相应的改动。
<property> <name>hbase.tmp.dir</name> <value>./tmp</value> </property> <property> <name>hbase.unsafe.stream.capability.enforce</name> <value>false</value> </property> <!-- HBase在HDFS上的存放位置,是刚才新建的文件夹 --> <property> <name>hbase.rootdir</name> <value>hdfs://master:9000/hbase</value> </property> <property> <name>hbase.master.info.port</name> <value>60010</value> </property> <!-- 开启分布式 --> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <!-- 使用HDFS --> <property> <name>hbase.unsafe.stream.capability.enforce</name> <value>true</value> </property> <!-- HMaster服务地址--> <property> <name>hbase.master</name> <value>hdfs://master:60000</value> </property> <!-- zookeeper信息,值与Zookeeper配置文件中相同 --> <property> <name>hbase.zookeeper.quorum</name> <value>master,slaver1,slaver2,slaver3</value> </property> <property> <name>hbase.zookeeper.property.clientPort</name> <value>2186</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/opt/module/hbase-2.4.4/zkdata</value> </property>
上述的几个配置中。要根据自己的机器进行修改。
包括:
这里要在hadoop上自己创建一个文件夹hbase。
这里要自己创建一个文件夹。
这里配置的内容是regionservers的。master就别再写进去了。
将hadoop中的这两个文件进行cp,到hbase的conf文件夹中。
将master配置好的内容。scp到其他的机器中。
命令:scp -r file-name username@hostname:filepath
准备启动我们的hbase,在master机器上去启动键入start-hbase.sh
It’s done,bro!我所有的组件都是在admin用户下操作的。如果出现一些权限问题,需要查看一下自己的所有组件的用户与用户组。
所有做到这里启动不了的。首先要去查看日志。在hbase下有个logs文件夹,记录的不同用户启动hbase的记录。通过记录可以很清楚看到究竟是什么问题。在配置hbase之前,要配置好zookeeper的内容。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。