amazon-athena 相关问题

Amazon Athena是一种针对存储在Amazon S3上的数据运行SQL查询的服务。 Amazon Athena是Amazon Web Services(AWS)的一部分。

如何在不使用胶水的情况下以编程方式将镶木地板数据从S3加载到Athena

我在S3位置有拼花数据,需要加载到Athena进行查询。但我不想从Web UI手动加载或手动运行查询。我们可以通过编程方式进行...

回答 1 投票 1

Athena可以搜索S3中的所有对象版本吗?

我已经做了一些关于这是否可行的阅读,但我找不到任何具体的东西。如果S3中的数据是版本化的JSON文件,我可以使用Athena搜索每个对象的所有版本吗?谢谢,

回答 1 投票 0

从aws athena cli运行包含伪列的查询

参考下面的帖子,如何在AWS Athena外部表中获取输入文件名作为列我尝试使用aws athena cli命令运行查询,如下所示,aws athena start-query -...

回答 1 投票 1

如何在Amazon Athena中设置日期DDL

我尝试使用此DDL在亚马逊的Athena中创建一个表但是在查询之后,我看到所有的日期值(在transactiondate字段中)都是NULL。源数据格式只是mm / dd / yyyy我....

回答 1 投票 1

这将是一个更快(更好)的工具,用于查询以Parquet格式存储的数据--Spark SQL,Athena或ElasticSearch?

我当前正在构建一个ETL管道,它将数据表(约100 + GB的顺序)输出到下游交互式仪表板,允许动态过滤数据(基于预定义的......)

回答 1 投票 1

让AWS Athena担任访问外部S3存储桶的角色

我在我的帐户中通过Glue设置了一个Athena表,该帐户应该查询我朋友帐户中的数据。我的朋友创建了一个IAM角色,我可以假设它有权访问S3数据。我......

回答 1 投票 1

“使用JDBC驱动程序,请求的fetchSize超过了Athena中允许的值”

我正在尝试使用RJDBC将数据从Athena DB提取到R,详见AWS自己的博客。唉,我试图提取的数据量很大,所以我得到以下错误......

回答 2 投票 4

在查询athena时将结构转换为json

我有一个athena表,我没有创建或管理,但可以查询。其中一个字段是结构类型。为了这个例子,让我们假设它看起来像这样:my_field struct

回答 1 投票 4

AWS Athena查询挂起并重新读取大量查询大小的数据

我在Athena的一个S3桶中设置了一个新的日志表,如下图所示,其中Athena位于BucketName /我有一个运行良好的Athena系统基于相同的数据,但没有......

回答 1 投票 0

Node-Express可以立即启动多少个请求?

我有一个脚本,它从AWS Athena中提取了25,000条记录,这些记录基本上是一个PrestoDB关系SQL数据库。让我们说我正在为这些记录中的每一个生成请求,这意味着......

回答 2 投票 2

亚马逊雅典娜不使用胶水目录

我使用aws glue crawler创建了一个带有表的数据库。在athena,我无法选择该数据库/表进行查询。我认为问题可以在服务区域位置。我的设置是下一个:s3 csv ...

回答 1 投票 2

Athena SQL查询问题

我正在尝试从每个值中获取数据......只有一个AND url LIKE'%value%'可以正常工作,但是我错过了能够做多个值的事情,请让我知道SELECT count( *)FROM“......

回答 2 投票 0

AWS Athena JDBC查询超时

我通过JDBC使用Amazon Athena。最近我得到java.sql.SQLException:几个查询的查询超时,但是当我运行println(statement.getQueryTimeout)时,我看到“0”表示查询...

回答 1 投票 1

SQL在case语句中比较一列中的多个数字

我有下表:| n |分钟|压力| -------------------- | 1 | 0.5 | 2.8 | | 2 | 1 | 3.2 | | 3 | 1.5 | 3.3 |我需要检查压力是否在1分钟>压力为0.5 ......

回答 1 投票 0

SQL Cross join在没有group by的case语句中使用max值进行计算

我有下表:| BoreholeID |分钟| ----------------- | BH1 | 0.5 | | BH1 | 1 | | BH1 | 1.5 |我想选择一个名为timeline的第三列,它有一个case语句......

回答 1 投票 1

s3 select和athena有什么区别

我试图了解aws athena服务和新发布的s3 select之间的区别(仍在预览中)。那两个用户的用途有何不同?它似乎都有助于选择......

回答 4 投票 13

Boto3 athena查询没有将数据保存到s3

我试图使用boto3运行一组查询,不想将数据保存到s3。相反,我只想获得结果并希望使用这些结果。我正在尝试做以下事情......

回答 3 投票 1

AWS Glue Crawler无法提取CSV标头

在我的智慧结束这里...我有15个csv文件,我从直线查询生成如:beeline -u CONN_STR --outputformat = dsv -e“SELECT ...”> data.csv我选择dsv因为一些字符串...

回答 1 投票 0

使用AWS Lambda从AWS SNS读取时修改JSON消息

我有一个上游应用程序向SNS主题发送以下JSON消息。我们使用AWS lambda函数在S3中保存此JSON对象:{“processResult”:{“processName”:“XYZ”,“...

回答 1 投票 0

maven repo中的Athena JDBC Driver 2.0.7?

从我能够弄清楚的,亚马逊Athena JDBC驱动程序的推荐maven依赖是com.syncron.amazonaws,simba-athena-jdbc-driver。我能找到的最新版本......

回答 2 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.