google-bigquery 相关问题

Google BigQuery是一款Google Cloud Platform产品,可使用SQL提供无人值守数据集的无服务器查询。 BigQuery提供多个读写流水线,并支持数据分析,从而改变企业分析数据的方式。

使用窗口函数运行 Total UDF(用户定义函数)会抛出“无法强制输出值”

输入数据集: 日期 ID 数字 期望的 2020-01-01 1 8 8 2020-01-02 1 11.5 19.5 2020-01-03 1 -20 0 2020-01-04 1 10 10 2020-01-05 1 -5 5 2020-01-06 2 -9 0 2020-01-07 2 26 26 2020-01-08 2 5 31

回答 1 投票 0

如何使用 BigQuery Slots

嗨,那里。 最近,我想通过在一些表上使用“group by”在bigquery web UI中运行查询(表的名称适合xxx_mst_yyyymmdd)。行数将超过1000万。不幸的是,查询失败了...

回答 3 投票 0

根据另一个表动态地从表中选择随机X(或顶部X)

表1 客户 挑选多少个 A 2 乙 1 C 3 表2 客户 数据 A a123 A a234 A a345 A a456 乙 b123 乙 b234 乙 b345 乙 b456 C c123 C c234 C c345 C c456 我想选择随机X(或...

回答 1 投票 0

删除 Firestore 到 BigQuery 扩展的更改日志中的旧行

我正在使用 Firebase Extension Stream Firestore to BigQuery 将数据导出到 BQ。 它工作得很好,我已经使用它好几年了。 然而,桌子的大小正在开始......

回答 1 投票 0

使用“Stream Firestore to BigQuery”将集合从 Firestore 导出到 BigQuery 时如何创建物化视图?

我正在利用 Stream Firestore to BigQuery 扩展将记录从 Firestore 传输和同步到 BigQuery。目前,该扩展仅生成指定频道的标准视图...

回答 1 投票 0

pandas_gbq 无法将标签附加到 bigquery 作业

我尝试将标签附加到bigquery作业,这应该通过Bigquery API工作,例如: df = pd.read_gbq(sql,project_id=project_id,方言='标准',configuration=query_config) 查询配置={ ...

回答 1 投票 0

如何将 BigQuery ML.PREDICT 的结果保存为表格?

是否可以将BigQuery的ML.PREDICT结果保存为表格? 创建 table_name 或将其替换为 ( 从 ML.PREDICT(...) 中选择 * ); 这会给出错误“不允许 model_name ...

回答 1 投票 0

BigQuery 自动检测与手动架构的不同行为

我的 Google 存储桶中有一个 CSV 文件。我试图通过 BigQuery 读取此内容,因此我在 CSV 文件上创建一个外部表。此 CSV 文件的第一列的格式为“2022...

回答 2 投票 0

BigQuery:查找 2 个值的最常见组合

我有一个这样的数据集: 人# 水果 001 橙子 001 葡萄 001 苹果 002 橙子 002 苹果 003 橙子 003 葡萄 004 橙子 004 苹果 这是我期望的输出: **组合

回答 1 投票 0

Google 表格数据连接器更新 折叠

我有一个连接到 BigQuery 的 Google 表格。每次我向连接的查询添加新字段时,都会构建工作表,它会更新提取内容并基于它崩溃数据透视表。 任何...

回答 1 投票 0

如何使用 pageToken 和适用于 Java 的 Google 客户端库来请求分页 BigQuery 查询结果?

我想运行包含数千行总结果的 BigQuery 查询,但我只想一次检索包含 100 个结果的页面(使用 maxResults 和 pageToken 参数)。 BigQuery API

回答 2 投票 0

将布尔列转置为标题名称(Google Sheets 到 BigQuery SQL)

我有一个电子表格,当前包含以下列: 活动日期 事件ID 工作室_1 工作室_2 event_date 是日期类型,event_id 是整数,studio_1 & studio_2 都是 TRUE...

回答 1 投票 0

BigQuery 项目的克隆/备份

如何将包含 Google BigQuery 中数据集的项目备份到另一个 GCS 存储桶?使用 Python 脚本来完成此任务是否可行?如何实现该过程的自动化? 只是尝试...

回答 1 投票 0

连接表(Bigquery)时 RLS 会发生什么

我使用 Bigquery 来查询数据,并且 RLS 已实施到我的表中。 我创建了一个表并连接了 2 个不同的表,分别具有 C1 和 C2 安全性:如何使用连接来处理 RLS ...

回答 1 投票 0

如何在 BigQuery PySpark 存储过程中运行标准 SQL 查询

我在 Bigquery 中运行以下 PySpark 存储过程; 从 pyspark.sql 导入 SparkSession Spark = SparkSession.builder.appName("work_with_sql").getOrCreate() df = Spark.sql( ''' 选择...

回答 2 投票 0

Firebase 到 Bigquery 转换函数错误:无效的 json 响应正文

我正在尝试为 Firestore 到 BigQuery Stream 扩展实现转换函数,但收到此错误: 未处理的错误 FetchError:无效的 json 响应正文 https://us-east4-<

回答 1 投票 0

如何在 BigQuery 中删除包含数组的重复行?

我想从数据集中删除重复的行,但有一些行作为数组。当我删除这些重复的行时,数据集的结构不会保留原来的结构。我展示了我的数据集,那...

回答 1 投票 0

使用 SQL 的后进先出 (LIFO) 事务行配对

我有一个事务表,我试图根据 LIFO 将流出映射到流入。 输入数据集 ID 日期 类型 数量 1 2024年1月26日 流入量 519 2 2024年1月26日 外流 100 3 2024年1月26日 流出...

回答 1 投票 0

连接 BigQuery 上嵌套字段的值

假设我有以下模式: [ { '名称': 'id', “类型”:“整数” } { '名称': '记录', '类型':'记录', '字段':[ { ...

回答 4 投票 0

在 BigQuery 中同时使用 CREATE TABLE / TEMP TABLE 和 WITH 子句时出现问题

我在尝试使用 CREATE TABLE 语句以及 BigQuery 中前面的 WITH 子句创建临时表时遇到语法错误。 我收到语法错误:Unexpe...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.