zoukankan      html  css  js  c++  java
  • HBase集群搭建

    准备工作

    需要先安装好Zookeeper集群和Hadoop集群

    Zookeeper集群启动

    ./bin/zkServer.sh start
    ./bin/zkServer.sh start
    ./bin/zkServer.sh start
    

    Hadoop集群启动

    ./sbin/start-dfs.sh
    ./sbin/start-yarn.sh
    

    HBase集群搭建

    HBase解压

    # 选择master节点
    sudo tar -zxvf hbase-1.3.1-bin.tar.gz -C /usr/local/
    

    配置文件

    hbase-env.sh

    export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_162
    # 使用外部的zookeeper,不用自带的
    export HBASE_MANAGES_ZK=false
    

    hbase-site.xml

    <configuration>
    	<property>
    		<name>hbase.rootdir</name>
    		<value>hdfs://slave1:9000/HBase</value>
    	</property>
    	<property>
    		<name>hbase.cluster.distributed</name>
    		<value>true</value>
    	</property>
    
    	<property>
    		<name>hbase.master.port</name>
    		<value>16000</value>
    	</property>
    	<property>
    		<name>hbase.zookeeper.quorum</name>
    		<value>master,slave1,slave2</value>
    	</property>
    	<property>
    		<name>hbase.zookeeper.property.dataDir</name>
    		<value>/usr/local/zookeeper/zkData</value>
    	</property>
    </configuration>
    

    regionservers

    master
    slave1
    slave2
    

    将hadoop的hdfs-site.xml和core-site.xml配置文件软连接到HBase中,或者复制到HBase/conf下

    ln -s /usr/local/hadoop/etc/hadoop/core-site.xml /usr/local/hbase/conf/core-site.xml
    ln -s /usr/local/hadoop/etc/hadoop/hdfs-site.xml /usr/local/hbase/conf/hdfs-site.xml
    

    将hbase目录发送给其他节点

    sudo scp -r ./hbase/ hadoop@slave1:/usr/local/
    sudo scp -r ./hbase/ hadoop@slave2:/usr/local/
    

    HBase集群启动

    ./bin/start-hbase.sh
    

    如果出现下面问题,是zookeeper没有文件写入权限的原因。将zookeeper目录权限改为可写入。

    ERROR: Can't get master address from ZooKeeper; znode data == null
    
  • 相关阅读:
    Oracle里的执行计划
    Java线程锁总结
    Java面试总结-链接
    oracle 排序函数(转载)
    微软今天的Windows 10硬件发布会汇总:手机瞬间变PC
    DevOps 在公司项目中的实践落地
    阿里云云计算工程师ACP学习笔记--知识点总结
    中小型互联网公司微服务实践-经验和教训
    Prometheus监控的最佳实践——关于监控的3项关键指标
    深度学习的Attention模型
  • 原文地址:https://www.cnblogs.com/chenshaowei/p/12715028.html
Copyright © 2011-2022 走看看