如何按时间间隔使用Google BigQuery进行分组

Question

我每5分钟记录一次TIMESTAMP天气数据，我想以15分钟的间隔分组。我发现下面的floor函数看起来很有希望，但是BQ不支持UNIX_TIMESTAMP函数

SELECT
    FLOOR(UNIX_TIMESTAMP(utc_timestamp)/(15 * 60)) AS timekey
GROUP BY
    timekey

做这个的最好方式是什么？

Answer 1

以下是BigQuery Standard SQL

#standardSQL
SELECT 
  TIMESTAMP_SECONDS(15*60 * DIV(UNIX_SECONDS(utc_timestamp), 15*60)) timekey,
  AVG(metric) metric
FROM `project.dataset.table`
GROUP BY timekey

您可以使用虚拟数据测试，使用上面的数据，如下例所示

#standardSQL
WITH `project.dataset.table` AS (
  SELECT TIMESTAMP '2019-03-15 00:00:00' utc_timestamp, 1 metric UNION ALL
  SELECT '2019-03-15 00:05:00', 2 UNION ALL
  SELECT '2019-03-15 00:10:00', 3 UNION ALL
  SELECT '2019-03-15 00:15:00', 4 UNION ALL
  SELECT '2019-03-15 00:20:00', 5 UNION ALL
  SELECT '2019-03-15 00:25:00', 6 UNION ALL
  SELECT '2019-03-15 00:30:00', 7 UNION ALL
  SELECT '2019-03-15 00:35:00', 8 UNION ALL
  SELECT '2019-03-15 00:40:00', 9 
)
SELECT 
  TIMESTAMP_SECONDS(15*60 * DIV(UNIX_SECONDS(utc_timestamp), 15*60)) timekey,
  AVG(metric) metric
FROM `project.dataset.table`
GROUP BY timekey
-- ORDER BY timekey  

结果

Row timekey                 metric   
1   2019-03-15 00:00:00 UTC 2.0  
2   2019-03-15 00:15:00 UTC 5.0  
3   2019-03-15 00:30:00 UTC 8.0   

显然，你可以使用你的逻辑需要的任何聚合 - 我只是为了举例而使用了AVG（）