zoukankan      html  css  js  c++  java
  • Hive_Rank

    1.函数说明

    RANK():

      排序相同时会重复,总数不会变

    DENSE_RANK():

      排序相同时会重复,总数会减少

    ROW_NUMBER():

      会根据顺序计算

    2.数据准备

    name

    subject

    score

    孙悟空

    语文

    87

    孙悟空

    数学

    95

    孙悟空

    英语

    68

    大海

    语文

    94

    大海

    数学

    56

    大海

    英语

    84

    宋宋

    语文

    64

    宋宋

    数学

    86

    宋宋

    英语

    84

    婷婷

    语文

    65

    婷婷

    数学

    85

    婷婷

    英语

    78

    3.需求

    计算每门学科成绩排名。

    4.创建本地score.txt,导入数据

    [hadoop@hadoop102 datas]$ vi score.txt

    5.创建hive表并导入数据

    create table score(
    name string,
    subject string, 
    score int) 
    row format delimited fields terminated by "	";
    load data local inpath '/opt/module/datas/score.txt' into table score;

    6.按需求查询数据

    select name,
    subject,
    score,
    rank() over(partition by subject order by score desc) rp,
    dense_rank() over(partition by subject order by score desc) drp,
    row_number() over(partition by subject order by score desc) rmp
    from score;
    
    name    subject score   rp      drp     rmp
    孙悟空  数学    95      1       1       1
    宋宋    数学    86      2       2       2
    婷婷    数学    85      3       3       3
    大海    数学    56      4       4       4
    宋宋    英语    84      1       1       1
    大海    英语    84      1       1       2
    婷婷    英语    78      3       2       3
    孙悟空  英语    68      4       3       4
    大海    语文    94      1       1       1
    孙悟空  语文    87      2       2       2
    婷婷    语文    65      3       3       3
    宋宋    语文    64      4       4       4

    扩展:求出每门学科前三名的学生?

    select name,

    subject,

    score,

    rank() over(partition by subject order by score desc) rp,

    dense_rank() over(partition by subject order by score desc) drp,

    row_number() over(partition by subject order by score desc) rmp

    from score;

     

    name    subject score   rp      drp     rmp

    孙悟空  数学    95      1       1       1

    宋宋    数学    86      2       2       2

    婷婷    数学    85      3       3       3

    大海    数学    56      4       4       4

    宋宋    英语    84      1       1       1

    大海    英语    84      1       1       2

    婷婷    英语    78      3       2       3

    孙悟空  英语    68      4       3       4

    大海    语文    94      1       1       1

    孙悟空  语文    87      2       2       2

    婷婷    语文    65      3       3       3

    宋宋    语文    64      4       4       4

    学习中,博客都是自己学习用的笔记,持续更新改正。。。
  • 相关阅读:
    rm 、git rm 、git rm --cached的区别
    实行敏捷开发阶段性总结
    [转]Pycharm 断点调试方法
    scp -v 查看具体的过程
    根据字典的值大小进行排序
    文件服务器满故障排查总结
    看谷歌白板面试有感
    [译]从列表或字典创建Pandas的DataFrame对象
    查找docker log久远数据方法
    docker log 批量删除报错: find: `/var/lib/docker/containers/': 没有那个文件或目录
  • 原文地址:https://www.cnblogs.com/Tunan-Ki/p/11808598.html
Copyright © 2011-2022 走看看