zoukankan      html  css  js  c++  java
  • hive与hbase数据类型对应关系

    hive与hbase数据类型对应关系

    当hbase中double,int 类型以byte方式存储时,用字符串取出来必然是乱码。

    在hivd与hbase整合时也遇到这个问题:做法是:#b

    1.加#b

    CREATE EXTERNAL TABLE hivebig (key string,CUST_NAME string,PHONE_NUM int,BRD_WORK_FLUX double) 

    STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
    WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,bd:CUST_NAME,bd:PHONE_NUM#b,bd:BRD_WORK_FLUX#b") 
    TBLPROPERTIES ("hbase.table.name" = "bigtable2");


    2.不加#b时,hive shell读取出来是乱码

    CREATE EXTERNAL TABLE hivebig (key string,CUST_NAME string,PHONE_NUM int,BRD_WORK_FLUX double) 

    STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
    WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,bd:CUST_NAME,bd:PHONE_NUM,bd:BRD_WORK_FLUX") 
    TBLPROPERTIES ("hbase.table.name" = "bigtable2");
    select * FROM hivebig;


    select * FROM hivebig where PHONE_NUM > 1;

    select * FROM hivebig where BRD_WORK_FLUX > 1555;


    cf:val#s 中的#s就表示类型为string,cf:foo没有配置类型,则采用hbase.table.default.storage.type的配置,#b为binary

    版权声明:本文为博主原创文章,未经博主允许不得转载。

  • 相关阅读:
    HDU 1385 Minimum Transport Cost
    TOJ 3488 Game Dice
    TOJ 1717 WOJ
    POJ 2553 The Bottom of a Graph
    TOJ 1836 Play on Words
    利用OpenCV建立视差图像
    分享一个PyTorch医学图像分割开源库
    WACV 2021 论文大盘点-图像分割篇
    SolidWorks动画教程(1):简单动画制作
    VS2013安装及破解教程
  • 原文地址:https://www.cnblogs.com/jamesf/p/4751465.html
Copyright © 2011-2022 走看看