我有一个SELECT
查询我正在执行它有一个MAX()
列和一个GROUP BY
子句,除了我需要返回到客户端的此查询的结果,我还需要返回所有结果的总计数。
基本上我的查询是这样的:
SELECT unique_id, col1, col2, MAX(col3) as col3
FROM tbl
GROUP BY col1, col2
它通常也会有一个WHERE
条款。
unique_id
是该表的主要关键。
将此数据返回给客户端时,我还指定LIMIT
和OFFSET
子句来限制一次检索的结果数。我的问题是,如果没有LIMIT
和OFFSET
子句,我还需要显示上述查询将产生的结果总数,以便客户端可以稍后/逐步检索其余的。
我知道我可以轻松使用WITH
临时表来获得我想要的东西:
WITH temp AS (
SELECT unique_id, col1, col2, MAX(col3) as col3
FROM tbl
GROUP BY col1, col2
)
SELECT count(*) FROM temp
但我担心这个问题的效率。 sans-LIMIT
-and-OFFSET
查询可以返回数万行,所以我认为WITH
获取总计数的方法不是最好的方法。
有没有更有效的方式,我没有想到的?或者WITH
方法是否正常(例如,MySQL服务器“智能”足以不分配查询的整个结果集来获取计数)?
假设这是我表中的数据:
unique_id col1 col2 col3
___________________________
1 5 8 30
2 5 8 33
3 5 9 40
4 6 8 30
5 6 8 31
6 6 8 32
7 6 9 39
8 7 8 33
9 7 8 32
10 8 8 34
所以我的SELECT
查询将返回此(假设客户端指定LIMIT 4 OFFSET 0
):
SELECT unique_id, col1, col2, max(col3) as col3
FROM tbl
GROUP BY col1, col2
LIMIT 4
OFFSET 0;
unique_id col1 col2 col3
___________________________
2 5 8 33
3 5 9 40
6 6 8 32
7 6 9 39
然后我会使用那个查询而不使用LIMIT
和OFFSET
子句作为子查询和SELECT COUNT(*)
,它将返回6
,我将返回6
和结果给客户端。
MySQL 8引入了对window functions的支持,包括窗口聚合函数。窗口聚合函数允许您返回聚合结果和非聚合数据。基本上,您可以通过将OVER
子句附加到窗口聚合函数来将常规聚合函数转换为窗口聚合函数,但通常还需要指定其他选项,链接手册中对此进行了详细说明。
您也可以在GROUP BY
查询中使用窗口聚合函数。在这些情况下,窗口聚合函数将在分组完成后应用于行集。另请注意,添加LIMIT
不会影响窗口聚合函数的结果。
考虑到以上所有因素,您可以像这样修改原始查询:
SELECT
unique_id,
col1,
col2,
MAX(col3) as col3,
COUNT(*) OVER () AS TotalRows
FROM
tbl
GROUP BY
col1,
col2
LIMIT
4 OFFSET 0
;
并一次性获取原始详细数据和行数。 OVER
子句没有附加的子句,这意味着它适用于整个行集。
正如我所说,窗口聚合函数将忽略LIMIT
子句,如果一个附加到查询。因此,上面的TotalRows
列将反映行数,就像未应用限制一样。