zoukankan      html  css  js  c++  java
  • Hive的基本和复合数据类型

    1.基本数据类型

    Hive数据类型

    Java数据类型

    长度

    例子

    TINYINT

    byte

    1byte有符号整数

    20

    SMALINT

    short

    2byte有符号整数

    20

    INT

    int

    4byte有符号整数

    20

    BIGINT

    long

    8byte有符号整数

    20

    BOOLEAN

    boolean

    布尔类型,true或者false

    TRUE  FALSE

    FLOAT

    float

    单精度浮点数

    3.14159

    DOUBLE

    double

    双精度浮点数

    3.14159

    STRING

    string

    字符系列。可以指定字符集。可以使用单引号或者双引号。

    ‘now is the time’ “for all good men”

    TIMESTAMP

     

    时间类型

     

    BINARY

     

    字节数组

     

        注:Hive的String类型相当于数据库的varchar类型,该类型是一个可变的字符串,不过它不能声明其中最多能存储多少个字符,理论上它可以存储2GB的字符数。

    2.集合数据类型

    数据类型

    描述

    语法示例

    STRUCT

    和c语言中的struct类似,都可以通过“点”符号访问元素内容。例如,如果某个列的数据类型是STRUCT{first STRING, last STRING},那么第1个元素可以通过字段.first来引用。

    struct()

    MAP

    MAP是一组键-值对元组集合,使用数组表示法可以访问数据。例如,如果某个列的数据类型是MAP,其中键->值对是’first’->’John’和’last’->’Doe’,那么可以通过字段名[‘last’]获取最后一个元素

    map()

    ARRAY

    数组是一组具有相同类型和名称的变量的集合。这些变量称为数组的元素,每个数组元素都有一个编号,编号从零开始。例如,数组值为[‘John’, ‘Doe’],那么第2个元素可以通过数组名[1]进行引用。

    Array()

        注:Hive有三种复杂数据类型ARRAY、MAP 和 STRUCT。ARRAY和MAP与Java中的Array和Map类似,而STRUCT与C语言中的Struct类似,它封装了一个命名字段集合,复杂数据类型允许任意层次的嵌套。

    示例:

        1.创建本地测试文件 test.txt

      

    
    

     songsong,bingbing_lili,xiao song:18_xiaoxiao song:19,hui long guan_beijing

    yangyang,caicai_susu,xiao yang:18_xiaoxiao yang:19,chao yang_beijing

    注意:MAP,STRUCT和ARRAY里的元素间关系都可以用同一个字符表示,这里用“_”。

        2.Hive上创建测试表test

    create table test(
    name string,
    friends array<string>,
    children map<string, int>,
    address struct<street:string, city:string>
    )
    row format delimited 
    fields terminated
    by ',' collection items terminated by '_' map keys terminated by ':' lines terminated by ' ';

    字段解释:分隔符均是自己定义,不要重复!同种类型的数据分隔符只能指定一次:如map指定了为冒号 ‘:’,之后用map分隔符必须使用冒号

    row format delimited

    fields terminated by ','     -- 逗号 为列分隔符

    collection items terminated by '_'        --    MAP STRUCT 和 ARRAY 的分隔符(数据分割符号) ,它们都是容器

    map keys terminated by ':'                          --   MAP中的key与value的分隔符

    lines terminated by ' ';                              --  行分隔符

         3.导入文本数据到测试表

    hive (default)> load data local inpath ‘/opt/module/datas/test.txt’into table test;
    

        4.访问三种集合列里的数据,以下分别是ARRAY,MAP,STRUCT的访问方式(各个数据类型查询也不同!

    hive (default)> select friends[1],children['xiao song'],address.city from test
    where name="songsong";
    OK
    _c0     _c1     city
    lili    18      beijing
    Time taken: 0.076 seconds, Fetched: 1 row(s)
    

     注:

     

     欢迎留言交流!我的大数据菜鸟交流群(本群刚起步,有你更精彩):875910806

  • 相关阅读:
    在QLabel上点击获得的效果
    Linux内核源代码解析——TCP状态转移图以及其实现
    SQL Server 执行计划缓存
    leetcode:Gray Code
    poj1459 Power Network
    eclipse 设置代码大小和布局里面代码大小
    shareSDK的初步使用(shareSDK中微信、qq等兼容问题,以及cocoapods支持架构冲突问题的解决)
    算法6-4:哈希表现状
    问题解决——限制窗体的最小尺寸
    Android用canvas画哆啦A梦
  • 原文地址:https://www.cnblogs.com/Mark-blog/p/11872853.html
Copyright © 2011-2022 走看看