google-bigquery 相关问题

Google BigQuery是一款Google Cloud Platform产品,可使用SQL提供无人值守数据集的无服务器查询。 BigQuery提供多个读写流水线,并支持数据分析,从而改变企业分析数据的方式。

BigQuery 在 JSON 对象的 JSON 数组中提取一个属性

我想修改以下查询以从JSON数组中的对象中提取值属性并输出一个表,如下所示: “值1”、“值2” 然而我目前的疑问

回答 1 投票 0

Airflow BigQueryInsertJobOperator 手动调用时不会渲染 jinja2 模板文件

我尝试在 PythonOperator 中手动调用 BigQueryInsertJobOperator,如下所示,但未生成 SQL 模板: def some_func(**kwargs): # ... 附加_tmp_to_raw_and_clean_after =

回答 1 投票 0

标准 SQL 弧度函数

从legacy切换到standard,是否有一个标准函数可以将值转换为弧度,类似于legacy? 通常,我会在旧版 SQL 中使用 radian(),但该函数不存在...

回答 2 投票 0

Snaplogic 将大量数据写入 BigQuery

我有一个包含管道执行快照的管道。执行快照调用一个管道,该管道使用 postgressql 执行快照从画布读取数据,然后将其写入 bigquery 数据库表。

回答 1 投票 0

SQL:使用坐标计算两点之间的距离

我有一个包含纬度和经度坐标的表,需要将距离添加到 Bigquery 中名为“距离”的新列中。 桌子 起始纬度 结束纬度 开始_lng 结束_lng 41.8964 41.9322 -87.661 -87.6...

回答 1 投票 0

仅用空格分隔时将三部分字符串拆分为两部分 - Bigquery

我正在 BigQuery 中创建名称数据库。源数据提供以下格式的名称:最后一个中间(也称为没有逗号,只有空格)。 我想要结束的是最后一个,第一个中间(

回答 1 投票 0

如何在BigQuery表中使用正则表达式过滤单词?我尝试使用 SQL 查询时遇到错误

我正在使用Google BigQuery表,我在其中插入几行来提交表,但对于其中一列[manfacturing_output],几个类别都带有句子,所以我尝试删除...

回答 1 投票 0

如何使用 AWS 联合令牌 json 连接到 Airflow 中的 Bigquery?

我需要构建一个从 google bigquery 读取的气流连接器,尽管托管在 aws 上。 我的 DevOps 团队创建了一个秘密 json,格式如下: { “类型”:“external_a...

回答 1 投票 0

为什么我们要在 Big Query SQL 中将 LIMIT 放在 WHERE 后面,并在后面跟一个分号?

LIMIT后面没有分号时不起作用! 我试图理解为什么 WHERE 不需要分号。我想知道这是否适用于所有 SQL 程序或仅适用于 Big Query。我...

回答 1 投票 0

使用 Spark BQ 连接器从 Dataproc 上的 Pyspark 作业向大查询表添加标签

我正在尝试在 google dataproc 集群上使用 py-spark 来运行 Spark 作业并将结果写入大查询表。 Spark Bigquery 连接器文档 - https://github.com/GoogleCloudDataproc/s...

回答 2 投票 0

SQL 将每月数据分解为每日行

我在 bigQuery 中使用 SQL 我需要将每月数据分解为每日条目并计算每天的总成本。 输入数据 开始日期 结束日期 ID 活动总成本 2024-01-01 2024-03-3...

回答 1 投票 0

适用于 Google Ads 的 BigQuery 数据传输服务 - 查找特定转化数据时遇到问题

我们已经使用大型查询集群设置 Google Ads 传输有一段时间了。通过 https://cloud.google.com/bigquery/docs/google-ads-transfer 进行设置。它满足了我们的很多需求,但...

回答 1 投票 0

如何统计两个有共同字段的表,但有时其中一个没有匹配的记录

让我解释一下我想要实现的目标(我使用 Bigquery): 我有两个表,一个称为请求,另一个称为事件,在请求表中,有按应用程序保存的记录

回答 1 投票 0

BigQuery 中的 PERCENT_RANK() 返回超出资源

当我尝试在大型数据集上使用 PERCENT_RANK() 时,它给了我一个错误。 选择 a2_lngram, a2_decade, a2_总频率, a2_totalbooks, a2_频率,a2_b频率, a2_arf, c_avgarf, ...

回答 2 投票 0

在 Bigquery 中特定数据出现时正确使用 AVG 函数

我无法理解如何在以下场景中使用AVG功能, 我有一个名为 requests 的表,它有列 app_name (STRING)、operation_status (整数状态代码,例如...

回答 1 投票 0

[GCP][BQ]在源上请求 bigquery.datasets.update 以创建视图

几天以来,当我的数据集上没有 bigquery.datasets.update 时,我似乎无法创建需要读取另一个数据集中的另一个视图的视图。 解释 : 我有一张桌子

回答 1 投票 0

Pub/Sub 在平台内测试时随机给出“缺少 1 个必需的位置参数:‘上下文’”

我在 Python 中设置了 Google Cloud Functions 平台内,通常使用 Pub/Sub 作为触发器。 我的主要功能始终格式如下: def 同步(事件,上下文): 当我编辑源代码时...

回答 1 投票 0

在 BigQuery 中上传并从 csv 文件创建表

我尝试在已创建并保存的数据集中创建一个表,第一个 csv 文件已成功上传,但我尝试的第二个文件在单击时显示以下错误...

回答 1 投票 0

如何在包含数千个条目的列中找到正确的名称?

我目前正在学习SQL进行数据分析。在今天的练习中,我必须回答以下问题: *2015年,按地区划分,达到官方中等教育年龄的人数...

回答 1 投票 0

Google BigQuery 从表中删除重复的边

我有一个表格如下: A栏 B栏 重量 A 乙 2 乙 A 2 C D 4 D C 4 A D 2 A G 2 这些代表无向网络。第 1 行和第 2 行是相同的,因为网络是无向的...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.