amazon-athena 相关问题

Amazon Athena是一种针对存储在Amazon S3上的数据运行SQL查询的服务。 Amazon Athena是Amazon Web Services(AWS)的一部分。

Amazon s3:获取 Athena/AWS Glue 目录中分区的上次更新日期

我正在尝试找到一种方法来获取每个分区的最后更新日期和时间。例如,如果 15-04-23 分区是在 3 月 15 日创建的,并且一个新文件添加到该分区...

回答 1 投票 0

为什么Athena在插入Iceberg表时会报“指定的键不存在”?

我正在 Athena 中创建一个 Iceberg 表,如下所示: 如果不存在则创建表 table1(`col1` 字符串,`col2` 字符串) 位置 's3://my-bucket/path/table1/' TBLPROPERTIES ('table_type'='ICEBERG', 'f...

回答 1 投票 0

AWS Athena:不允许从没有列的关系中选择 *

尝试访问某些表时遇到以下错误,但某些表工作正常,这可能是什么原因。 询问: 从 icbs_cup00901_d LIMIT 1 选择 * 相同的查询适用于其他表,所以...

回答 4 投票 0

根帐户上的 AWS Athena S3 日志权限被拒绝

我有一个 S3 存储桶 mybucketlogs,它是通过另一个存储桶的 S3 日志记录功能创建的。我的根帐户是两个存储桶以及两个存储桶中所有对象的所有者。 我跟着...

回答 1 投票 0

如何自动连接 Athena 与 aws Grafana 工作区

我创建了一个 aws_grafana_workspace,并且可以使用 Grafana 提供程序(使用工作区 URL 和 API 密钥进行配置)与其进行交互。但是,我遇到连接困难...

回答 1 投票 0

AWS Managed Grafana 从 Athena 检索数据时超时

我们已经在AWS上设置了托管Grafana,安装了必要的插件,并将Athena设置为数据源。 当我们在 Grafana 中运行查询时,我们可以在 Athena 中看到它(在最近的查询选项卡中),并且...

回答 1 投票 0

Athena 分区表未产生任何结果

我正在尝试在 Athena 中创建分区表。在 S3 上,根据指南,我有以下目录结构: aws s3 ls s3://arapbi/polygon/tickers/ PRE dt=...

回答 1 投票 0

AWS Athena 删除表 + S3 位置

我有一个情况,我需要删除表并使用 lambda 函数替换它。 到目前为止,我的第一个 lambda 函数使用以下 SQL 查询删除表: 如果存在则删除表 [虚拟表] ...

回答 2 投票 0

如何将数据连接到并非每个人都可用的表而不丢失结果?

我有一个主表,表 1,其中包含学生 ID 和一些其他信息的列。表 2 包括学生 ID、调查问题和答复列。 本质上,我...

回答 1 投票 0

Jupyter Notebook 中的 Pyathena 找不到 aws 配置文件

我正在使用 jupyter 笔记本,我正在尝试通过笔记本使用 PyAthena 模块查询 AWS athena。 我在项目中的第一行是: 雅典娜 = pyathena.connect(profile_name="NAME") ...

回答 1 投票 0

带有 IGNORE NULLS 表达式的first_value 函数在 Athena AWS 上不起作用

我使用过fist_value函数,它工作正常,但是当我添加“IGNORE NULLS”时,出现以下错误 第 1:179 行:输入“)”不匹配。期待:“结束” 我的功能: 第一个值(如果(

回答 1 投票 0

如何在AWS Athena分区表上查询

问题总结 当我尝试使用 WHERE 子句 SELECT 查询分区表时,Athena 产生错误。 我的日志表中有 4 种类型的分区。 年份字符串 月...

回答 2 投票 0

视图使用 get_json_object 在 Athena 中失败,但在 Databricks 中有效

在我们的组织中,我们需要在 Databricks 和 Athena 中公开数据。 我们有一些使用“get_json_object(my_col)['path']”函数的视图,并按 Databricks 的预期运行。

回答 1 投票 0

Amazon Athena 中窗口函数中的百分位数

我正在寻找问题的解决方案。我正在使用 Amazon Athena,需要一个字段来显示产品在 2 个时间戳之间的天数百分位数。我可以在亚马逊使用它

回答 1 投票 0

通过 Lambda 实时监控 AWS Athena 查询

我正在使用 AWS Lambda (Node.js/JavaScript) 和 AWS AppSync 开发无服务器应用程序。在我的应用程序中,我使用 Athena 对 S3 文件运行查询。我在有效监控方面面临挑战...

回答 2 投票 0

Trino/Presto SQ:仅当 NULL 出现在组中第一个非 NULL 值之后时,才将 NULL 替换为值

我想用指定的字符串替换NULL值。但是,我只想对第一个非 NULL 之后的 NULL 值进行此替换。意思是,如果 NULL 值在第一个值之前...

回答 1 投票 0

Athena 未加载数据库和表列表

就这么简单。 Athena 用于加载我使用 Glue 爬取的数据库和表。数据存在于 S3 中,Athena 以前曾工作过。但是突然加载图标转了一圈...

回答 2 投票 0

Aws Athena SQL 查询在 Apache Spark 中不起作用

我的查询在 Athena 中工作,但在 Spark SQL 中不起作用。 询问- 将 cte 作为 ( 选择年份(日期)作为年份,计数(*)作为总计,计数(col1)作为 col1_not_null,计数(col2)作为 col2_not_null 来自

回答 1 投票 0

aws - Athena 中提供哪些文件元数据?

aws Athena 允许用户显示正在读取行的基础文件,如下所示: 从表中选择时间戳“$path” 我正在寻找其他专栏的完整列表...

回答 2 投票 0

在 Trino/Presto SQL 中:创建一个新列来说明(枚举)每个组的顺序变化

我想计算一个新列,该列根据每个组和该组内的序列变化分配一个 ID。 考虑下表: #|用户 ID |我的日期 |颜色 | # |---------|-----...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.