一:SparkSQL中的函数
1.说明
2.展示所有的函数
qlContext.sql("show functions").show(300)
3.functions类
所有内置支持的函数。
主要用于DSL语言。
二:窗口分析函数
1.说明
hive中常用的一种分析函数。
2.在Spark中使用beeline
sbin/start-thriftserver.sh
3.求每个部门的平均sal值
select deptno,avg(sal) from emp group by deptno;
4.求每个部门的平均sal值,并且返回值是部门id、人员id、人员名称、人员sal值、平均sal值
select empno,ename,sal,deptno, avg(sal) OVER (PARTITION BY deptno) from emp