zoukankan      html  css  js  c++  java
  • hive与hbase数据类型对应关系

    hive与hbase数据类型对应关系

    当hbase中double,int 类型以byte方式存储时,用字符串取出来必然是乱码。

    在hivd与hbase整合时也遇到这个问题:做法是:#b

    1.加#b

    CREATE EXTERNAL TABLE hivebig (key string,CUST_NAME string,PHONE_NUM int,BRD_WORK_FLUX double) 

    STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
    WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,bd:CUST_NAME,bd:PHONE_NUM#b,bd:BRD_WORK_FLUX#b") 
    TBLPROPERTIES ("hbase.table.name" = "bigtable2");


    2.不加#b时,hive shell读取出来是乱码

    CREATE EXTERNAL TABLE hivebig (key string,CUST_NAME string,PHONE_NUM int,BRD_WORK_FLUX double) 

    STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
    WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,bd:CUST_NAME,bd:PHONE_NUM,bd:BRD_WORK_FLUX") 
    TBLPROPERTIES ("hbase.table.name" = "bigtable2");
    select * FROM hivebig;


    select * FROM hivebig where PHONE_NUM > 1;

    select * FROM hivebig where BRD_WORK_FLUX > 1555;


    cf:val#s 中的#s就表示类型为string,cf:foo没有配置类型,则采用hbase.table.default.storage.type的配置,#b为binary

    版权声明:本文为博主原创文章,未经博主允许不得转载。

  • 相关阅读:
    Git 最全命令使用
    git 配置(实用)
    用Redis进行实时数据排名
    最长上升子序列
    KMP算法
    计算星期几【基姆拉尔森公式】
    集合划分(贝尔数)
    合数分解(质因数分解)
    乘法逆元
    扩展欧几里得算法
  • 原文地址:https://www.cnblogs.com/jamesf/p/4751465.html
Copyright © 2011-2022 走看看