BigQuery查询只附加Facebook广告洞察的表格返回列表ARRAY类型的网站_ctr不能用于SELECT DISTINCT

Question

我正在将所有Facebook见解同步到BigQuery。这是一个仅附加表，这意味着我必须获取最新批次。所以我试图通过使用campaign_id作为主键来选择最新批次。但是，当我尝试使用文档中的查询执行此操作时，我收到此错误。有谁知道如何查询BigQuery的最新批次？

我正在使用stichdata的集成将数据推送到BigQuery。参考文献：https://www.stitchdata.com/docs/data-structure/querying-append-only-tables#latest-version-every-row https://www.stitchdata.com/docs/integrations/saas/facebook-ads#ads-insights

这是BigQuery的查询问题

Column website_ctr of type ARRAY cannot be used in SELECT DISTINCT

这是我正在使用的查询

SELECT DISTINCT o.* FROM `xxx.facebook_ads.ads_insights` o
INNER JOIN (
     SELECT campaign_id,
            MAX(_sdc_sequence) AS seq,
            MAX(_sdc_batched_at) AS batch
    FROM `xxx.facebook_ads.ads_insights`
    GROUP BY campaign_id) oo
ON o.campaign_id = oo.campaign_id
AND o._sdc_sequence = oo.seq
AND o._sdc_batched_at = oo.batch

Answer 1

请尝试以下BigQuery Standard SQL

#standardSQL
SELECT ANY_VALUE(o).*
FROM `xxx.facebook_ads.ads_insights` o
INNER JOIN (
  SELECT campaign_id,
    MAX(_sdc_sequence) AS seq,
    MAX(_sdc_batched_at) AS batch
  FROM `xxx.facebook_ads.ads_insights`
  GROUP BY campaign_id
) oo
ON o.campaign_id = oo.campaign_id
AND o._sdc_sequence = oo.seq
AND o._sdc_batched_at = oo.batch
GROUP BY o.campaign_id 

如您所见，更改实际上位于代码的第一行（在SELECT语句中）和查询末尾的额外行（GROUP BY） - 因此相对简单的修复

我不熟悉Facebook洞察数据，因此无法在上面进行测试 - 但对于我可以从问题中的细节进行逆向工程的简单案例 - 它应该有效！