百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

这是我见过最简单易懂的sql窗口分析函数使用教程了[赞][赞][赞]

wptr33 2024-11-21 22:05 27 浏览

上一篇:「sql笔记」left join 还是right join?


一、理解

Mysql8.0开始支持窗口函数,极大增强了Mysql的统计性能,再也不会被Oracle等鄙视了。Mysql8.0还增加了其他实用的高级性能,关注公众号后续文章进行了解。

1、使用场景

可从两个角度来了解和分辨需要使用窗口函数的场景。

(1)要查询的数据有n组性质相同的数据集(订单表可以按品类分成n组、按日期分成n组等),对每组组内的数据都需要做相同的统计计算。比如各品类的销售额前3名的商品分别是?比如各部门出勤率最好的3位员工是?

(2)符合以下5类窗口函数的代表的统计意义

排序函数:row_number() 、rank()、dense_rank(),对每组组内进行排序。

分布函数:percent_rank()、cume_dist(),对每组组内的个体在组内占比或累计占比。

绝对位置函数:first_value()、last_value()、nth_value(),对每组组内的第1位、最后1位、第n位的值。

相对位置函数:lag()、lead(),对每组内的某字段的前n行和后n行的值。

分桶函数:ntile(x),将每组内的行,再分别分成x个组(桶)。

此前版本的Mysql没有窗口函数,要解决此类问题,会引入变量到sql中,很复杂。现在好啦,最方便的窗口函数可以使用了。

2、理解窗口

窗口可以理解为上面描述的把待分析数据分为n组的组或集合。每组内的每条数据都要在此窗口内执行同一个函数。窗口函数运行后,数据行数保持不变。

以下示例,每个品类的商品按照金额从大到小的排名。金额排名这列就是用窗口函数计算出来的,各窗口内的数据行数保持不变,零食类还是2行,水果类还是3行。

row_number() over(partition by 品类 order by 金额 desc) as 金额排名

当不分组,而是全部数据当作1组来对待,此时窗口只有1个,单一窗口。

row_number() over(order by 金额 desc) as 金额排名

二、函数介绍

1、排序函数

row_number(),1、2、3、4,重复值的序号也是连续+1,不会有重复结果。

rank(),1、1、3、4,有相同值时,序号可能不连续。

dense_rank(),1、1、2、3,有相同值时,序号也是连续的。

2、分布函数

3、相对位置函数

4、绝对位置函数

5、分桶函数

6、聚合函数参与窗口计算

三、特殊窗口

1、单一窗口

在理解窗口章节中已经提及过,over()中不使用pratition by,即where出来的数据作为1组。

2、细分窗口

3、滑动窗口

current row,边界是当前行,一般和其他范围关键字一起使用

rows x preceding/following,边界是当前行减去x行,边界是当前行加上x行

rows unbounded preceding/following,边界是分组的第一行,边界是分组的最后一行

range interval 7 day preceding/following,当前行日期向前、向后7天纳入计算

窗口函数很神奇,很强悍,可以把复杂的逻辑封装起来,简洁调用。对于数据分析师,这是打怪升级过程中必须掌握的,会让你的数据加工提效n倍。

最后提一个问题,本文案例均是partition by和order by一个字段,试问,over()里可以partition by几个字段,order by 几个字段?关注明天文章揭晓答案。



上一篇:「sql笔记」left join 还是right join?

相关推荐

HIVE 窗口函数详解(hive常用开窗函数)

什么是窗口函数窗口函数是SQL中一类特别的函数。和聚合函数相似,窗口函数的输入也是多行记录。不同的是,聚合函数的作用于由GROUPBY子句聚合的组,而窗口函数则作用于一个窗口,这里,窗口...

SQL高效使用20招:数据分析师必备技巧

基础优化技巧善用EXPLAIN分析执行计划EXPLAINSELECT*FROMordersWHEREorder_date>'2024-01-01';...

答记者问之 - Redis 的高效架构与应用模式解析

问:极客程序员你好,请帮我讲一讲redis答:redis主要涉及以下核心,我来一一揭幕Redis的高效架构与应用模式解析...

MySQL通过累计求新增(mysql新增表字段语句)

前两天的那篇内容《MySQL递归实现单列分列成多行》...

一文讲懂SQL窗口函数 大厂必考知识点

大家好,我是宁一。今天是我们的第24课:窗口函数。...

圣诞快乐:用GaussDB T 绘制一颗圣诞树,兼论高斯数据库语法兼容

转眼就是圣诞的节日,祝大家节日快乐。用GaussDBT(也就是GaussDB100)绘制一棵圣诞树,纯国产,更喜庆。话不多说,上图:SQL如下:SELECTCASEWHENENMOTE...

Minitab:功能强大的质量管理、统计分析及统计图形软件

一、Minitab简介Minitab软件是为质量改善、教育和研究应用领域提供统计软件和服务的先导,是全球领先的质量管理和六西格玛实施软件工具及持续质量改进的良好工具软件,她具有强大的功能和简易的可视化...

如何熟练使用SQL查询(如何熟练使用sql查询内容)

要熟练使用SQL查询(StructuredQueryLanguage),你需要系统地从语法入门,到实战练习,再到性能优化与多表查询的掌握。下面是一条循序渐进、实战驱动的学习路径:第一阶段:S...

SAP SE38如何在多个系统间同步代码

上一篇文章写了如何在多个系统之间同步开发对象:多套SAPERP之间一键同步ABAP开发内容,有兄弟问有没有简单办法同步SE38程序代码的,因为使用请求的方式同步代码有点小题大做了。...

Python | 垂直模态分解(phython垂直输出)

...

技术栈:刷了百道SQL题,还是不会用?你应该这样补短板

这是来自用户的提问,也是很多人遇到的困惑:...

mysql窗口函数为了解决更加复杂的问题

为了解决复杂问题的窗口函数我们先讲一下窗口函数是什么窗口和普通的函数作用相同在不同列上进行查询和返回比如我们有如下的表...

MariaDB开窗函数(开窗函数 mysql)

在使用GROUPBY子句时,总是需要将筛选的所有数据进行分组操作,它的分组作用域是整张表。分组以后,为每个组只返回一行。而使用基于窗口的操作,类似于分组,但却可以对这些"组"(即窗口...

一文掌握 DuckDB 时间序列分析:窗口函数实战详解

...

一篇文章搞定MySQL中的窗口函数(mysql常用的窗口函数)

我是孙斌,北理数学系毕业,分享数据分析相关知识,点击右上角“关注”,学习更多数据分析知识。在MySQL中,分组groupby一般和聚合函数连用,如groupby+sum,这样能够得到每个组的总和,...