Hbase安装配置(含分布式ZooKeeper)

  

  环境说明

  系统为CentOS 6.0

  192.168.255.128 =》 server01

  192.168.255.130 =》 server02

  192.168.255.131 =》 server03

  /etc/hosts文件中有这些IP和域名的映射关系

  配置server01在hadoop用户下可以通过密钥无需密码访问server02和server03

  1. 安装配置zookeeper

  在三台服务器上执行以下同样的操作

  a. 下载

  wgethttp://apache.etoak.com//zookeeper/zookeeper-3.3.4/zookeeper-3.3.4.tar.gz-P /usr/local/src

  b. 安装

  cd /usr/local/src

  tar zxvf zookeeper-3.3.4.tar.gz

  mv zookeeper-3.3.4 /usr/local/zookeeper

  chown -R hadoop:hadoop /usr/local/zookeeper

  解压安装,目录的拥有者设置为zookeeper

  c. 建立数据目录

  mkdir /data/zookeeper

  chown -R hadoop:hadoop /data/zookeeper

  d. 修改配置文件

  创建配置文件(注意:以下操作在hadoop用户中进行)

  su - hadoop

  ln -s /usr/local/zookeeper zookeeper

  cd zookeeper/conf

  cp zoo_sample.cfg zoo.cfg

  编辑配置文件

  vizoo.cfg#修改数据目录dataDir为以下值dataDir=/data/zookeeper#添加以下段落server.1=192.168.255.128:2887:3887server.2=192.168.255.130:2888:3888server.3=192.168.255.131:2889:3889

  server.id=host:port:port标识不同的ZooKeeper服务器

  需要在每个服务器的数据目录中(这边为/data/zookeeper)创建myid文件,文件的内容为以上对应的server.id中的id

  vi/data/zookeeper/myid#值为各个服务器对应的server.id中的idid

  e. 配置环境变量并启动ZooKeeper

  vi.bashrcexportZOOKEEPER_HOME=/usr/local/zookeeperPATH=$PATH:$ZOOKEEPER_HOME/binexitsu-hadoop

  需要在每一台机器上都启动

  zkServer.sh start

  f. 验证

  zkCli.sh -server 192.168.255.128:2181

  [zk: 192.168.255.128:2181(CONNECTED) 0] help

  ......

  显示帮助内容

  2. 安装HBase

  同样也是三台服务器执行同样的操作

  a. 下载

  wgethttp://apache.etoak.com//hbase/hbase-0.90.5/hbase-0.90.5.tar.gz-P /usr/local/src

  b. 安装

  cd /usr/local/src

  tar zxvf hbase-0.90.5.tar.gz

  mv hbase-0.90.5 /usr/local/hbase

  chown -R hadoop:hadoop /usr/loca/hbase

  c. 配置文件

  su - hadoop

  ln -s /usr/local/hbase hbase

  cd hbase/conf

  编辑配置文件hbase-site.xml

  vihbase-site.xmlconfigurationpropertynamehbase.rootdir/namevaluehdfs://server01:9000/hbase/valuedescription区域服务器使用存储HBase数据库数据的目录/description/propertypropertynamehbase.cluster.distributed/namevaluetrue/valuedescription指定HBase运行的模式:false:单机模式或者为分布式模式true:全分布模式/description/propertypropertynamehbase.zookeeper.quorum/namevalueserver01,server02,server03/valuedescriptionZooKeeper集群服务器的位置/description/property/configuration

  编辑配置文件regionservers

  viregionserversserver02server03

  设置环境变量hbase-env.sh

  vihbase-evn.shexportHBASE_MANAGES_ZK=false

  使用独立的ZooKeeper时需要修改HBASE_MANAGES_ZK值为false,为不使用默认ZooKeeper实例。

  d. hadoop和hbase版本匹配问题

  使用的版本信息如下:

  hadoop-0.20.205.0.tar.gz

  hbase-0.90.5.tar.gz

  需要将hadoop主目录下的hadoop-core-0.20.205.0.jar和主目录中lib目录下的commons-configuration-1.6.jar复制到HBase主目录的lib目录中,并删除原来的hbase主目录的lib目录下的hadoop-core-0.20-append-r1056497.jar。

  否则,会出现两个错误,不能连接zookeeper和找不到common.configuration对应的类

  e. 修改hadoop用户环境变量并启动HBase

  vi.bashrcexportHBASE_HOME=/usr/local/hbasePAHT=$PATH:$HBASE_HOME/bin

  exit

  su - hadoop

  以上使(先退出hadoop用户到root,然后登陆到hadoop用户)环境变量生效

  需要先启动ZooKeeper(已经启动)和hdfs文件系统

  注意:以下两个命令只需要在server01下启动

  start-dfs.sh

  start-hbase.sh

  f. 测试

猜你喜欢

转载自blog.csdn.net/qianfeng_dashuju/article/details/83112544