1. 首页 > 资讯 > 生活资讯

的高级玩法 用滑动窗口做运行式统计 PostgreSQL

介绍

SQL 窗口函数对于计算移动的平均值或运行中的总计等复杂聚合计算非常有用。ROWS 子句允许您为计算指定行,从而可以启用更复杂的窗口框架。以下是在 SQL 中使用 ROWS BETWEEN 子句的 5 个实用示例。

窗口函数(也称为 OVER 函数)可根据滑动窗口框架(即一组行)计算其结果。它们类似于聚合函数,因为您可以计算一组行的平均值、总和值或最小值/最大值。但是,存在一些重要的差异:

•窗口函数不会像聚合函数那样折叠行。因此,您仍然可以将单个行中的属性与窗口函数的结果混合。

•窗口函数允许滑动窗口框架,这意味着,对于每个单独的行,用于计算窗口函数的行集可能都不同。

窗口函数的语法如下所示:

 column_1 column_2     window_frame window_column_alias table_name

当您在 SELECT 语句中使用窗口函数时,您基本上在使用这个函数计算出另一列:

•首先指定一个函数(例如AVG()、SUM()、或COUNT())。

•然后,使用OVER关键字定义一组行。您还可以选择这样:

用PARTITION BY对行进行分组,以便在这些组内计算函数,而不是在整个行集中计算函数。

如果行的顺序很重要(例如,在计算汇总时),可使用 ORDER BY 对窗口框架内的行进行排序。

指定窗口框架与当前行的关系(例如,框架应该是当前行和前两行,或当前行和所有后续行等)。

窗口框架是使用ROWS、RANGE和GROUPS子句定义的。在本文中,我们将重点介绍ROWS子句及其选项。

ROWS 子句:语法和选项

ROWS 子句的用途是指定与当前行相关的窗口框架。语法为:

ROWS BETWEENlower_boundANDupper_bound

界限可以是以下五个选项中的任何一个:

•UNBOUNDED PRECEDING– 当前行之前的所有行。

•n PRECEDING– 当前行之前的 n 行。

•CURRENT ROW– 仅当前行。

•n FOLLOWING– 当前行后的 n 行。

•UNBOUNDED FOLLOWING– 当前行之后的所有行。

以下是使用ROWS子句定义窗口框架时需要记住的几点:

•窗口框架在每个分区中单独计算。

•默认选项取决于您是否使用ORDER BY:

带有ORDER BY时,默认框架为RANGE BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW。

没有ORDER BY时,则默认框架为ROWS BETWEEN UNBOUNDED PRECEDING AND UNBOUNDED FOLLOWING。

•如果其中一个边界是当前行,则可以跳过指定此界限,并使用较短版本的窗口框架定义:

UNBOUNDED PRECEDING与BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW相同。

n PRECEDING与BETWEEN n PRECEDING AND CURRENT ROW相同。

n FOLLOWING与BETWEEN CURRENT ROW AND n FOLLOWING相同。

UNBOUNDED FOLLOWING与BETWEEN CURRENT ROW AND UNBOUNDED FOLLOWING相同。

让我们来看一些示例,看看它在实践中是如何工作的。

在窗口函数中使用 ROWS 子句的示例

示例 1

为了开始使用ROWS子句,我们将使用下表,其中有一个书店的销售数据。

表 sales

record_id

date

revenue

1

2021-09-01

1515.45

2

2021-09-02

2345.35

3

2021-09-03

903.99

4

2021-09-04

2158.55

5

2021-09-05

1819.80

  revenuerevenue           running_total sales  

要使用窗口函数计算运行总计,我们执行以下步骤:

•使用SUM()聚合函数计算总收入。

•通过将下限定义为UNBOUNDED PRECEDING和上限为CURRENT ROW来指定窗口框架。这将包括当前行之前的所有行(包括当前行)。请注意,这种情况和没有指定ROWS子句的默认行为是相同的。默认框架使用RANGE,而不是ROWS。由于每天的记录在表中只出现一次,因此RANGE和ROWS的结果将相同。因此,我们也可以使用以下查询,来获得相同的结果:

SELECT date, revenue,SUM(revenue) OVER (ORDER BY date) running_sumFROM salesORDER BY date;

date

revenue

running_total

2021-09-01

1515.45

1515.45

2021-09-02

2345.35

3860.80

2021-09-03

903.99

4764.79

2021-09-04

2158.55

6923.34

2021-09-05

1819.80

8743.14

如您所见,查询按预期工作,我们在第三列中获得了汇总。第一天,它等于当天的销售额,即 1515.45 美元;第二天,它等于第一天和第二天的销售额总和,即 3860.80 美元;在下一行中,我们得到前三天的销售额总和,即 4764.79 美元,依此类推。

在接下来的示例中,我们将看到当记录被分成几组时,ROWS子句是如何工作的。

示例 2

在接下来的几个例子中,我们将使用下表。它包含两个中国城市(Shanghai 和 Beijing)连续五天的平均温度(以 °C 为单位)和总降水量(以毫米为单位),这些只是虚构数据。

表 weather

record_id

date

city

temperature

precipitation

101

2021-09-01

Shanghai

18.5

7

102

2021-09-01

Beijing

17.3

5

103

2021-09-02

Shanghai

18.0

20

104

2021-09-02

Beijing

17.0

15

105

2021-09-03

Shanghai

20.1

12

106

2021-09-03

Beijing

19.0

10

107

2021-09-04

Shanghai

20.2

0

108

2021-09-04

Beijing

19.6

0

109

2021-09-05

Shanghai

22.5

0

110

2021-09-05

Beijing

20.4

0

我们想分别计算每个城市的三天移动平均温度。为了分隔两个城市的计算,我们将包含子句PARTITION BY。然后,在指定窗口框架时,我们将考虑当天和前两天:

另请注意,我们已将窗口函数放在ROUND() 函数中,以便将三天的移动平均值四舍五入到小数点后一位。结果如下:

city

date

temperature

mov_avg_3d_city

Beijing

2021-09-01

17.3

17.3

Beijing

2021-09-02

17.6

17.5

Beijing

2021-09-03

19.0

18.0

Beijing

2021-09-04

19.6

18.7

Beijing

2021-09-05

20.4

19.7

Shanghai

2021-09-01

18.5

18.5

Shanghai

2021-09-02

19.0

18.8

Shanghai

2021-09-03

20.1

19.2

Shanghai

2021-09-04

20.2

19.8

Shanghai

2021-09-05

22.5

20.9

Beijing 和 Shanghai 的移动平均值是分别计算的。对于 9 月 1 日,移动平均值等于日平均温度,因为我们之前没有任何记录。然后,在 9 月 2 日,移动平均值计算为 1 日和 2 日的平均温度(Beijing 为 17.5 °C,Shanghai 为 18.8 °C)。9 月 3 日,我们终于有足够的数据来计算三天(前两天和今天)的平均温度,结果是 Beijing 为 18.0 °C,Shanghai 为 19.2 °C。然后,将 9 月 4 日的三天移动平均值计算为 2 日、3 日和 4 日的平均温度,依此类推。

还有一点需要注意:窗口框架中的记录顺序,在指定要计算的行方面起着关键作用。

但是,我们可以通过按降序对记录进行排序,然后将ROWS选项更改为包括2 FOLLOWING(后两天)而不是2 PRECEDING(前两天):

 city  temperaturetemperature    city           mov_avg_3d_city weather  city 

此查询输出了完全相同的结果。

示例 3

在此示例中,我们将分别计算两个城市过去三天的总降雨量(即三天的运行总降雨量)。

 city  precipitationprecipitation    city     running_total_3d_city weather  city 

在此查询中,我们再次按城市对数据进行分区。我们使用SUM()函数来计算过去三天(包括当天)的总降雨量。另请注意,我们使用了缩写方式来定义窗口框架,只指定了下限:2 PRECEDING。

下面是上述查询的输出:

city

date

precipitation

running_total_3d_city

Beijing

2021-09-01

5

5

Beijing

2021-09-02

15

20

Beijing

2021-09-03

10

30

Beijing

2021-09-04

0

25

Beijing

2021-09-05

0

10

Shanghai

2021-09-01

7

7

Shanghai

2021-09-02

20

27

Shanghai

2021-09-03

12

39

Shanghai

2021-09-04

0

32

Shanghai

2021-09-05

0

12

截至 9 月 3 日,我们得到 Beijing 连续三天的降雨总量:30 毫米。这是 9 月 1 日降雨量 5 毫米、第 2 天降雨量 15 毫米和第 3 天降雨量 10 毫米之和。

您知道我们是如何在 9 月 5 日为 Shanghai 获得 12 毫米的总降雨量的吗?请尝试根据我们输出表中的结果进行思考,以确保您了解窗口函数如何与特定窗口框架一起工作。

现在让我们继续来看一些新的数据和示例。

示例 4

在接下来的两个示例中,我们将使用如下所示的数据。它包括有关三个社交网络(Instagram、Facebook 和 LinkedIn)新订阅者数量的每日信息。

表 subscribers

record_id

date

social_network

new_subscribers

11

2021-09-01

Instagram

40

12

2021-09-01

Facebook

12

13

2021-09-01

LinkedIn

5

14

2021-09-02

Instagram

67

15

2021-09-02

Facebook

23

16

2021-09-02

LinkedIn

2

17

2021-09-03

Instagram

34

18

2021-09-03

Facebook

25

19

2021-09-03

LinkedIn

10

20

2021-09-04

Instagram

85

21

2021-09-04

Facebook

28

22

2021-09-04

LinkedIn

20

下面是满足此请求的 SQL 查询:

 social_network  new_subscribersnew_subscribers    social_network     running_total_network subscribers  social_network 

输出如下所示:

date

social_network

new_subscribers

running_total_network

2021-09-01

Facebook

12

12

2021-09-02

Facebook

23

35

2021-09-03

Facebook

25

60

2021-09-04

Facebook

28

88

2021-09-01

Instagram

40

40

2021-09-02

Instagram

67

107

2021-09-03

Instagram

34

141

2021-09-04

Instagram

85

226

2021-09-01

LinkedIn

5

5

2021-09-02

LinkedIn

2

7

2021-09-03

LinkedIn

10

17

2021-09-04

LinkedIn

20

37

在结果表中,您可以看到,对于每个新记录,如何将新订阅者的数量添加到累积总数中。按照窗口函数中的指定,将为每个网络单独计算运行总计。

示例 5

在最后一个示例中,我们来演示下,如何使用窗口函数和 ROWS 子句,显示一组特定记录的第一个值和最后一个值。这一次,让我们在输出中添加两列:

•第一天添加的新订阅者数量,以及

•最后一天添加的新订阅者数量。

通过为每个社交网络单独计算这些信息,比较我们开始的地方和现在的情况,我们可以看到每天的表现。

以下是获取所需输出的 SQL 查询:

SELECT social_network, date, new_subscribers,FIRST_VALUE(new_subscribers) OVER(PARTITION BY social_networkORDER BY date) AS first_day,LAST_VALUE(new_subscribers) OVER(PARTITION BY social_networkORDER BY dateROWS BETWEEN UNBOUNDED PRECEDING AND UNBOUNDED FOLLOWING) AS last_dayFROM subscribersORDER BY social_network, date;

如您所见,我们使用FIRST_VALUE()和LAST_VALUE()函数,分别获取第一天和最后一天的信息。另请注意,我们如何为每个函数指定窗口框架:

•我们没有在 FIRST_VALUE() 函数上包含 ROWS 子句,因为默认行为(即RANGE BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)就符合我们的要求。

•但是,我们确实在LAST_VALUE()函数指定了窗口框架,因为默认行为将使用当前行值作为每条记录的最后一个值;这不是我们在此示例中要获得的内容。我们指定窗口框架ROWS BETWEEN UNBOUNDED PRECEDING AND UNBOUNDED FOLLOWING,以确保计算所有记录。

下面是结果集:

date

social_network

new_subscribers

first_day

last_day

2021-09-01

Facebook

12

12

28

2021-09-02

Facebook

23

12

28

2021-09-03

Facebook

25

12

28

2021-09-04

Facebook

28

12

28

2021-09-01

Instagram

40

40

85

2021-09-02

Instagram

67

40

85

2021-09-03

Instagram

34

40

85

2021-09-04

Instagram

85

40

85

2021-09-01

LinkedIn

5

5

20

2021-09-02

LinkedIn

2

5

20

2021-09-03

LinkedIn

10

5

20

2021-09-04

LinkedIn

20

5

20

根据要求,我们为每个社交网络分别计算了第一天和最后一天的新订阅者数量。

本网站的文章部分内容可能来源于网络和网友发布,仅供大家学习与参考,如有侵权,请联系站长进行删除处理,不代表本网站立场,转载者并注明出处:https://www.jmbhsh.com/shenghuozixun/35660.html

联系我们

QQ号:***

微信号:***

工作日:9:30-18:30,节假日休息