zoukankan      html  css  js  c++  java
  • Hadoop之——HBase注意事项

    转载请注明出处:http://blog.csdn.net/l1028386804/article/details/46447573
    

    1.HBase(NoSQL)的数据模型

    1.1 表(table)

          存储管理数据的。

    1.2 行键(row key)

         类似于MySQL中的主键。

        行键是HBase表天然自带的。

    1.3 列族(column family)

          列的集合。

        HBase中列族是须要在定义表时指定的,列是在插入记录时动态添加的。
        HBase表中的数据,每一个列族单独一个文件。

    1.4 时间戳(timestamp)

         列(也称作标签、修饰符)的一个属性。

        行键和列确定的单元格,能够存储多个数据,每一个数据含有时间戳属性,数据具有版本号特性。    
        假设不指定时间戳或者版本号。默认取最新的数据。

    1.5 存储的数据都是字节数组。

    1.6 表中的数据是依照行键的顺序物理存储的。

    2.HBase的物理模型

    2.1 HBase是适合海量数据(如20PB)的秒级简单查询的数据库。

    2.2 HBase表中的记录。依照行键进行拆分。 拆分成一个个的region。

        很多个region存储在region server(单独的物理机器)中的。


        这样。对表的操作转化为对多台region server的并行查询。

    3.HBase的体系结构

    3.1 HBase是主从式结构,HMaster、HRegionServer

    4.HBase伪分布安装

    4.1 解压缩、重命名、环境变量设置

    4.2 改动$HBASE_HOME/conf/hbase-env.sh

    改动内容例如以下:

        export JAVA_HOME=/usr/local/jdk
        export HBASE_MANAGES_ZK=true

    4.3 改动$HBASE_HOME/conf/hbase-site.xml

    改动内容例如以下:

        <property>
          <name>hbase.rootdir</name>
          <value>hdfs://hadoop0:9000/hbase</value>
        </property>
        <property>
          <name>hbase.cluster.distributed</name>
          <value>true</value>
        </property>
        <property>
          <name>hbase.zookeeper.quorum</name>
          <value>hadoop0</value>
        </property>
        <property>
          <name>dfs.replication</name>
          <value>1</value>
        </property>

    4.4 (可选)文件regionservers的内容为hadoop0

    4.5 启动hbase。运行命令start-hbase.sh

        ******启动hbase之前,确保hadoop是执行正常的,而且能够写入文件*******

    4.6 验证:

              (1)运行jps,发现新添加了3个java进程,各自是HMaster、HRegionServer、HQuorumPeer

              (2)使用浏览器来访问http://hadoop0:60010

    版权声明:本文博主原创文章,博客,未经同意不得转载。

  • 相关阅读:
    绝对路径和相对路径的问题
    get请求中的中文乱码问题的解决方法
    jsp中的另一种分页实现方法
    jsp中退出功能实现代码
    jsp中完整的分页显示和页面跳转功能实现的源代码
    jsp中未登录用户也可以浏览页面的功能实现代码
    date和calendar对象的转化,使用,以及插入数据库中的总结
    jsp中向数据库中插入当前时间的方法精确到秒
    硬盘方式安装 Windows 7
    HP笔记本中CQ4x系列,在XP下的未知设备与声卡设备驱动
  • 原文地址:https://www.cnblogs.com/bhlsheji/p/4844164.html
Copyright © 2011-2022 走看看