google-bigquery 相关问题

Google BigQuery是一款Google Cloud Platform产品,可使用SQL提供无人值守数据集的无服务器查询。 BigQuery提供多个读写流水线,并支持数据分析,从而改变企业分析数据的方式。

使用 JSON 文件的 BigQuery 外部表

我有JSON格式的电商产品数据。该数据经常更新。我计划将这些数据加载到 BigQuery 中。鉴于 JSON 文件很大(几百个属性),然后...

回答 1 投票 0

选择结构/值

我想知道除了文档中的教科书示例之外,BigQuery 的 SELECT AS STRUCT|VALUES 修饰符的可能用例是什么。 AS STRUCT 减少了非标量 ro...

回答 1 投票 0

如何在 BigQuery 中使用 PIVOT 使用参数而不是实际日期?

我在服务器中使用以下查询,我需要使列成为动态的而不是字符串。 我尝试使用: UNNEST(GENERATE_DATE_ARRAY('2024-03-12', '2024-03-25', 间隔 1 天)) 但是...

回答 1 投票 0

如何返回具有特殊字符的字符串 - BigQuery

我对SQL非常陌生,我一直在数据集上练习,但我似乎遇到了一些麻烦: 我想拉某种咖啡加工方法:“自然/干”。但是当我去ru...

回答 1 投票 0

用于审查改进大查询的示例查询

查看代码并解释修复它所需的内容。 sql 新手,这是一项复习作业。所以试图理解正在执行的逻辑是什么 这将在大型查询平台上运行 那个...

回答 1 投票 0

如何使用sql中的rank()函数消除额外的重复记录?

我有以下2条记录: 钥匙 开始时间 结束时间 ID 地位 12 2020-8-12 2300-01-01 1 积极的 12 1998年9月23日 2014-9-23 2 积极的 这是我当前拥有的 row_number() 函数: row_number() o...

回答 1 投票 0

执行 BigQuery 存储过程需要什么权限?

我需要授予某人执行bigquery存储过程的权限,但我不想授予他们roles/bigquery.admin,我宁愿通过自定义ro仅授予所需的权限...

回答 1 投票 0

如何从表中进行过滤,其中2个不同的列有2个不同的记录,并且在bigquery中具有相同的键组合集?

我正在处理数百万数据,我想过滤具有同一组键组合的 2 个不同记录的 2 个不同列, 该表看起来像: SK 不 姓名 出生日期 TS EFF_DT 酸...

回答 1 投票 0

在(左)连接的“ON”条件中添加“UNNEST”是否正确?

假设我有一个包含列“field1”的bigquery表“table1”和一个包含数组列“field2”的表“table2” 我想加入ta的每一行...

回答 1 投票 0

如何使用Python中的参数化sql查询从包含结构数组的列表中更新bigquery中的行

我在谷歌云中有一个云函数,它使用流插入将有关图像的数据加载到bigquery中。每个图像都分为不同的部分,因此我在每个部分的表格中都有一行......

回答 1 投票 0

如何使用子查询中的值在 SQL 中执行函数

我正在使用来自bigquery的citibike信息,目前正在学习子查询。我正在平均每个站点可用的自行车数量,然后尝试减去可用的数量...

回答 1 投票 0

BigQuery:如何从 STRUCT 数组中过滤掉空值

当我的查询在结构数组中包含空值时,我无法在 BigQuery 中使用 SQL。这是我收到的错误: 数组不能有空元素;字段写入错误

回答 1 投票 0

日期问题 - 如何解析此 SQL 中的日期

当我运行代码时,不断发生日期错误。我已经解析了日期,但我怀疑我需要在代码的其他地方解析它。我尝试过这样做,但我显然错过了一些东西。 什...

回答 1 投票 0

如何通过 dbt-core 和 profile.yml 使用不同的 OAuth 帐户?

我有一个 dbt-core 项目,其中包含以下项目.yml: 测试: 目标:开发者 输出: 开发人员: 类型:大查询 方法:oauth 项目:我的项目 ID-123456 数据集:dbt_na...

回答 1 投票 0

使用窗口函数运行 Total UDF(用户定义函数)会抛出“无法强制输出值”

输入数据集: 日期 ID 数字 期望的 2020-01-01 1 8 8 2020-01-02 1 11.5 19.5 2020-01-03 1 -20 0 2020-01-04 1 10 10 2020-01-05 1 -5 5 2020-01-06 2 -9 0 2020-01-07 2 26 26 2020-01-08 2 5 31

回答 1 投票 0

如何使用 BigQuery Slots

嗨,那里。 最近,我想通过在一些表上使用“group by”在bigquery web UI中运行查询(表的名称适合xxx_mst_yyyymmdd)。行数将超过1000万。不幸的是,查询失败了...

回答 3 投票 0

根据另一个表动态地从表中选择随机X(或顶部X)

表1 客户 挑选多少个 A 2 乙 1 C 3 表2 客户 数据 A a123 A a234 A a345 A a456 乙 b123 乙 b234 乙 b345 乙 b456 C c123 C c234 C c345 C c456 我想选择随机X(或...

回答 1 投票 0

删除 Firestore 到 BigQuery 扩展的更改日志中的旧行

我正在使用 Firebase Extension Stream Firestore to BigQuery 将数据导出到 BQ。 它工作得很好,我已经使用它好几年了。 然而,桌子的大小正在开始......

回答 1 投票 0

使用“Stream Firestore to BigQuery”将集合从 Firestore 导出到 BigQuery 时如何创建物化视图?

我正在利用 Stream Firestore to BigQuery 扩展将记录从 Firestore 传输和同步到 BigQuery。目前,该扩展仅生成指定频道的标准视图...

回答 1 投票 0

pandas_gbq 无法将标签附加到 bigquery 作业

我尝试将标签附加到bigquery作业,这应该通过Bigquery API工作,例如: df = pd.read_gbq(sql,project_id=project_id,方言='标准',configuration=query_config) 查询配置={ ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.