zoukankan      html  css  js  c++  java
  • Spark2 Dataset聚合操作

    data.groupBy("gender").agg(count($"age"),max($"age").as("maxAge"), avg($"age").as("avgAge")).show
    +------+----------+------+------+                                               
    |gender|count(age)|maxAge|avgAge|
    +------+----------+------+------+
    |female|         5|  32.0|  29.0|
    |  male|         5|  57.0|  39.0|
    +------+----------+------+------+
    
    
    data.groupBy("gender").agg("age"->"count","age" -> "max", "age" -> "avg").show
    +------+----------+--------+--------+                                           
    |gender|count(age)|max(age)|avg(age)|
    +------+----------+--------+--------+
    |female|         5|    32.0|    29.0|
    |  male|         5|    57.0|    39.0|
    +------+----------+--------+--------+
    
  • 相关阅读:
    作业
    第四次作业
    第三次作业
    作业
    第4次作业
    第3次作业,c语言
    第二次作业
    黄义方 作业4
    课堂作业
    第三次作业
  • 原文地址:https://www.cnblogs.com/wwxbi/p/6102269.html
Copyright © 2011-2022 走看看