zoukankan      html  css  js  c++  java
  • 搭建HBase完全分布式集群

     

    搭建完全分布式集群

     

    HBase集群建立在hadoop集群基础之上,所以在搭建HBase集群之前需要把Hadoop集群搭建起来,并且要考虑二者的兼容性.现在就以5台机器为例,搭建一个简单的集群.

     

    软件版本:hadoop-2.8.0,hbase-1.3.0,zookeeper-3.4.10

     

    5台机器IP192.168.70.101(c7001)192.168.70.102(c7002)192.168.70.103(c7003)192.168.70.104(c7004)192.168.70.105(c7005)

     

    一.搭建Hadoop集群

     

    参看:hadoop HA分布式集群搭建

     

    二.安装zookeeper

     

    参看:zookeeper集群安装

     

    三.部署hbase

     

    1.解压缩hbase的软件包,使用命令:

     

    tar -zxvf hbase-1.3.0-bin.tar.gz  

     

    2.进入hbase的配置目录,在hbase-env.sh文件里面加入java环境变量.即:

     

    JAVA_HOME=export JAVA_HOME=/opt/jdk1.8.0_121

     

    关闭HBase自带的Zookeeper,使用Zookeeper集群:

     

    export  HBASE_MANAGES_ZK=false  

     

    3. 编辑hbase-site.xml ,添加配置文件:

     

    <?xml version="1.0"?>
    <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
    <configuration>
      <property> 
        <name>hbase.rootdir</name> 
        <value>hdfs://c7001:8020/hbase</value> 
      </property> 
      <property> 
        <name>hbase.cluster.distributed</name> 
        <value>true</value> 
      </property> 
      <property> 
        <name>hbase.zookeeper.quorum</name> 
        <value>c7003,c7004,c7005</value> 
      </property> 
      <property> 
        <name>hbase.zookeeper.property.dataDir</name> 
        <value>/opt/hbase-1.3.0/tmp/zk/data</value> 
      </property>
    </configuration>

     

    4. 编辑配置目录下面的文件regionservers. 命令:

     

    vi   regionservers    

     

    加入如下内容:

     

    c7004
    c7005

     

    5. 把Hbase复制到其他机器,命令如下:

     

    [vagrant@c7003 opt]$ scp -r hbase-1.3.0 vagrant@c7004:/opt/
    [vagrant@c7003 opt]$ scp -r hbase-1.3.0 vagrant@c7005:/opt/

     

    6. 在c7003机器开启hbase服务。命令如下:

     

    [vagrant@c7003 hbase-1.3.0]$ bin/start-hbase.sh   

     

    在c7003、c7004、c7005中的任意一台机器使用bin/hbase shell 进入hbase自带的shell环境,然后使用命令version等,进行查看hbase信息及建立表等操作。   

     

    至此:

     

    c7001、c7002、c7003、c7004、c7005集群各个进程情况如下所示:

     

     

  • 相关阅读:
    2013Esri全球用户大会之ArcGIS for Desktop
    简单的session共享的封装
    支付系统开发中可能遇到的问题
    Java定位CPU使用高问题--转载
    ReflectionToStringBuilder
    solrcloud使用中遇到的问题及解决方式
    使用ELK(Elasticsearch + Logstash + Kibana) 搭建日志集中分析平台实践--转载
    php和java的memcached使用的兼容性问题解决过程
    multi-CPU, multi-core and hyper-thread--转
    Java Garbage Collection Basics--转载
  • 原文地址:https://www.cnblogs.com/hyh123/p/8039779.html
Copyright © 2011-2022 走看看