tyxiayu 发表于 2018-10-28 15:16:52

hadoop安装(3)

zookeeper和hbase安装  #--hbase是Hadoop的数据库,依赖于zookeeper,默认的hbase自带zookeeper
  #不是很好用,这里我们自己安装zookeeper
  1.下载软件 & 解压软件
  zookeeper.apache.org
  hbase.apache.org
  $ tar -zxvf zookeeper-3.4.11.tar.gz -C /usr/local
  $ tar -zxvf hbase-1.3.1.tar.gz -C /usr/local
  2.配置用户环境变量
  export ZK_HOME=/usr/local/zookeeper-3.4.11
  export PATH=$PATH:$ZK_HOME/bin
  export HBASE_HOME=/usr/local/hbase-1.3.1
  export PATH=$PATH:$HBASE_HOME/bin
  $ source ~/.bashrc
  3.配置zookeeper(这里是三个节点的zookeeper)
  3.1在master节点配置
  $ cp zoo_sample.cfg zoo.cfg
  #修改以下几个地方
  dataDir=/usr/local/zookeeper/data
  server.1=bigdata1:2888:3888
  server.2=bigdata2:2888:3888
  server.3=bigdata3:2888:3888
  #修改日志的目录,日志类型
  $ vim log4j.properties
  zookeeper.root.logger=INFO, ROLLINGFILE
  log4j.appender.ROLLINGFILE=org.apache.log4j.DailyRollingFileAppender
  $ vim zkEnv.sh
  ZOO_LOG_DIR="/usr/local/zookeeper-3.4.11/logs"
  ZOO_LOG4J_PROP="INFO,ROLLINGFILE"
  #创建所需的目录,三个节点都需要这么创建
  $ sudo mkdir /usr/local/zookeeper-3.4.11/logs/
  $ sudo chown -R hadoop.hadoop /usr/local/zookeeper-3.4.11/logs
  $ sudo mkdir -p /usr/local/zookeeper/data
  $ sudo chown -R hadoop.hadoop /usr/local/zookeeper/
  #创建节点myid文件,其它的节点需要改变,这里的id对应着zoo.cfg里的id
  $ sudo echo "1" >/usr/local/zookeeper/data/myid
  #拷贝文件到另外的节点
  $ sudo scp -r zookeeper-3.4.11/ bigdata2:/usr/local/
  $ sudo scp -r zookeeper-3.4.11/ bigdata3:/usr/local/
  $ sudo scp -r zookeeper bigdata2:/usr/local/
  $ sudo scp -r zookeeper bigdata3:/usr/local/
  #启动
  $ zkServer.sh
  #检查
  $ ps -ef|grep zoo
  4.配置hbase
  $ vim hbase-site.xml
  
  
  hbase.tmp.dir
  /usr/local/hbase/tmp
  
  
  hbase.rootdir
  hdfs://bigdata1:9000/hbase
  
  
  hbase.cluster.distributed
  true
  
  
  hbase.zookper.quorum
  bigdata1,bigdata2,bigdata3
  
  
  hbase.zookeeper.property.dataDir
  /usr/local/zookeeper/
  
  
  #配置slave节点
  $ vim regionservers
  bigdata2
  bigdata3
  #配置java和zookeeper,false是不使用hbase自带的zookeeper
  $ vim hbase-env.sh
  export JAVA_HOME=/usr/local/jdk1.8.0_144/
  export HBASE_MANAGES_ZK=false
  #默认的日志位置就在logs下,但安装包没有创建,这里我们手动创建下,每个节点都要创建
  $ sudo mkdir /usr/local/hbase-1.3.1/logs
  $ sudo chown -R hadoop.hadoop /usr/local/hbase-1.3.1/logs/
  5.拷贝hbase文件到其它节点上
  $ sudo scp -r hbase-1.3.1/ bigdata2:/usr/local/
  $ sudo scp -r hbase-1.3.1/ bigdata3:/usr/local/
  6.启动hbase
  $ start-hbase.sh
  7.查看日志输出,一次情况根据日志处理
  8.默认web地址
  http://master-ip:16010

页: [1]
查看完整版本: hadoop安装(3)