amazon-athena 相关问题

Amazon Athena是一种针对存储在Amazon S3上的数据运行SQL查询的服务。 Amazon Athena是Amazon Web Services(AWS)的一部分。

SQL Athena/Presto 将持续时间转换为 DD HH MM 格式

我的表有 2 列时间戳。我的目标是获得这 2 个时间戳列之间的差异,但格式应该是 DD HH MM。 该表如下所示: 使用 date_diff 函数...

回答 1 投票 0

正则表达式在 Athena 中工作,但在 Spark SQL 中不起作用,即使在转义字符后也是如此

我正在使用 Spark SQL 将持续时间转换为秒。这是我在 Athena 中尝试过的,效果很好。 雅典娜代码: `SELECT regexp_extract(duration, '^P(?!$)(\d+(?:\.\d+)?Y)?(\d+(?:\.\d+)?M)?(\d+(?. ..

回答 1 投票 0

AWS 对 Tableau 的成本

我正在尝试将 AWS 集成到 Tableau,将所有成本使用情况报告发送到 Tableau,以便我可以在 Tableau 中更好地可视化我的成本,有人这样做吗?我没发现什么有用的

回答 1 投票 0

JDBC AWS - Athena - 指定数据库

我正在尝试使用 Athena 和 JDBC 来执行一些 SQL 查询。我已经阅读了很多如何连接: “jdbc:awsathena://AwsRegion=us-east-1;用户=%s;密码=%s;S3OutputLocation=%s” 以上是...

回答 1 投票 0

AWS Athena 可以访问 Glue 目录博客,但查询返回零行

AWS Athena 似乎存在权限问题,但我不知道在哪里? 我浏览粘合表(代表抓取的 S3 csv 文件)以及我尝试“预览”或...

回答 2 投票 0

使用 Cloudformation 将分区投影添加到 AWS Athena 表

我有一个 Athena 表,它使用在 cloudformation 中指定的模板定义: 云信息创建 事件表: 类型:AWS::Glue::Table 特性: CatalogId: !Ref AWS::AccountId

回答 2 投票 0

AWS Glue 爬网程序仅爬网列名称而不是数据

我有多级 json 文件,我已使用 Glue 作业将其转换为 CSV。现在我尝试在该 CSV 文件上使用爬网程序,爬网程序正确创建粘合表(显示已创建状态 1)。布...

回答 2 投票 0

无法使用 IAM 配置文件从 DBeaver 创建到 AWS Athena 的连接

我正在尝试建立从本地 DBeaver 到 Athena 的连接。具体来说,我有一个 IAM 配置文件,我认为它是导致我的尝试失败的原因。 我首先要提到的是我在

回答 1 投票 0

如何用SQL组合客户已有的产品

我有一个表,其中包含许多行,其中包含客户和他们拥有的产品。 是这样的: 客户 产品 1 A 1 乙 1 C 2 A 2 乙 2 D 3 A 3 乙 如何编写查询来获取结果...

回答 1 投票 0

DATE_TRUNC 从周日开始 SQL presto (Athena)

这个问题听起来很简单,但我一直无法找到直接的解决方案。我正在使用 AWS Athena,据我所知,这是一个 presto 引擎。 我有变量“created_at”...

回答 2 投票 0

是否可以将AWS Athena中的数据卸载到单个文件?

文档指出 UNLOAD 结果并行写入多个文件。 我想这对于读取和写入来说都更有效,因此卸载到单个文件没有意义。但是,如果...

回答 3 投票 0

aws athena 查询以获取大于特定数字的计数

如何使用 AWS Athena 查询获得大于特定数字的计数? 选择 concat(cast(date as varchar),' ',substr(time,1,5)) as datetime, 请求, count(*) 作为计数 来自“

回答 1 投票 0

SQL LAG() 函数,条件为 where

我的桌子是这样的: 和 my_table (用户 ID、日期、事件名称、值) AS ( 价值观 (1,'2021-10-01','级别',5), (1,'2021-10-03','购买',空), (1,'2021-10-05','纯...

回答 2 投票 0

第二辆状态车的持续时间,间隔 5 分钟

我被这个问题困扰了。 我在 Athena AWS 中有一个数据库,其中有一个名为 cars_status 的表,其中包含以下数据示例: 汽车ID 地位 开始时间 时间结束 1 可用的 2023-08-03 09:00:00 2023-08-03...

回答 0 投票 0

在 Athena 中创建内联表

我正在尝试在 AWS Athena 中编写一个查询,将一组值放入一列中。 到目前为止我的查询是: 选择 (123, 456) 但这会产生: 列0 {字段0=123,字段1=456} 德西...

回答 1 投票 0

如何使用/不使用 Glue Crawler 自动执行 ALTER TABLE 添加分区

我注意到 ADD PARTITIONS 更有效,因为我在 s3 中处理 JSON 数据。我设置的爬虫需要很长时间才能完成。当我要求它只“抓取新的粉丝......

回答 3 投票 0

如果其中一个值与 org.apache.hadoop.hive.serde2.OpenCSVSerde AWS Athena 中的相应列类型不匹配,如何跳过读取行?

我在 Athena 中创建了一个表,该表使用以下查询从 S3 文件夹内的 gziped csv 文件获取数据: 如果不存在,则创建外部表 `mydatabase`.`mytable` ( `messageId` st...

回答 1 投票 0

如何通过API创建Athena数据库

我想通过 API 在 Athena 中创建一个数据库。我在 S3 中有镶木地板文件,我想使用 API 进行查询,并且我想使用 Athena 进行查询。 无论如何我可以创建一个数据库...

回答 2 投票 0

athena 将多列连接成一个 json 字符串

我的要求: 我有一个名为 Students 的表,具有此架构 ----------------------- | ID 姓名 年龄 城市 | ----------------------- | 1个12个城市1 | | 2 b 13 城市2 | | 3 度 14 度...

回答 3 投票 0

在 SQL 中从一个分类列中创建多个列

变量列有温度、压力和体积。我正在尝试为每个类别创建一个专栏。我一直在尝试使用 PIVOT 来实现它,但没有成功。 我在这里分享的是

回答 0 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.