amazon-s3 相关问题

Amazon S3(简单存储服务)是Amazon Web Services提供的在线对象存储服务。

Hive / S3错误:“No FileSystem for scheme:s3”

我在我的本地计算机上从容器运行Hive(此图像:https://hub.docker.com/r/bde2020/hive/)。我正在尝试使用以下命令创建在S3中存储为CSV的Hive表:...

回答 1 投票 0

如何使作业幂等于多次运行在S3中生成相同的结果文件

我使用spark df write将镶木地板文件保存到S3。场景:我运行Job1并将xyz.parquet保存到S3,我的Job2拿起xyz.parquet并将数据加载到DB。现在,我希望下次运行Job1时......

回答 1 投票 0

AWS S3和Cloudfront单个文件带宽?

我正在使用S3和cloudfront向我的用户提供视频,但有没有办法让我看到视频使用了多少带宽?我似乎无法在aws中看到它的自我,我发现......

回答 1 投票 -1

将JSON文件加载到Redshift

我试图使用copy命令将S3上的一堆JSON文件加载到redshift。 JSON文件的示例结构是:{message:3 time:1521488151 user:39283 information:{bytes:...

回答 1 投票 0

如何使用boto3在Beanstalk上运行的应用程序中验证会话

我的应用程序是通过Elastic Beanstalk部署的。它需要访问S3。我可以使用自己的访问密钥在本地进行,但我不希望在部署时将其存储在任何位置。鉴于实例正在......

回答 1 投票 1

在CloudFront访问上触发RDS lambda

我通过CloudFront从我的S3 Bucket提供静态JS文件,我想监视谁访问它们,我不希望它通过CloudWatch完成等等,我想自己记录它。 ...

回答 3 投票 0

无法在goofys挂载的文件夹中生成zip文件

我尝试使用goofys在已挂载的目录中创建一个zip文件,但是失败并显示以下错误消息:$ su - foo-user $ zip hoge.zip hoge updates:hoge zip I / O错误:操作不支持zip ...

回答 1 投票 1

如何在将文件上传到s3时处理互联网不可用?

我已经在python中编写了调度程序,以便在特定时间将文件上传到AWS S3(使用调度程序)。如果当时没有互联网连接,我收到socket.gaierror:[...

回答 1 投票 1

致命错误:发生错误(SignatureDoesNotMatch)

我正在尝试使用GitLabs DevOps功能来构建,测试和部署Vue.js应用程序到S3。我可以在我的本地机器上部署应用程序。但是在设置.gitlab-ci.yml文件时要部署到...

回答 1 投票 0

AWS S3 Sync - 结算报表GetObject(拒绝访问)

我有一个合并的结算帐户,我尝试使用S3 Sync下载结算报告。当我尝试这样做时,它会在同步目录时抛出“拒绝访问”错误。所以 ...

回答 1 投票 0

AWS S3 SDK:如何从多文件上载中的进度回调中获取文件名?

所以我使用AWS S3 Javascript SDK上传多个文件。以下代码运行良好,但我确实有一个问题。进度函数(evt)是异步调用的,我无法得到...

回答 1 投票 0

AWS DataPipeline表示未找到DynamoDB表

我的管道配置为将数据从S3存储桶复制到DynamoDB表。我正在使用HiveActivity和以下脚本:CREATE EXTERNAL TABLE s3_table(hash STRING,属性STRING)LOCATION'#{...

回答 1 投票 1

使用Iteratees使用Play Scala将文件直接上传到S3 chunk-by-chunk

我试图使用Iteratees将文件直接上传到s3。我仍然是函数式编程的新手,并且很难将一些工作代码拼凑在一起。我写了一个迭代...

回答 1 投票 2

私有登台S3存储桶的策略

我希望我的staging.example.org上的暂存网站只能以私人方式访问。例如,当用户登录AWS控制台时,我是否可以仅向自己提供私人访问权限?

回答 1 投票 0

AWS Firehose中间S3存储桶和传输流依赖关系出现问题

为多个传输流设置一个s3存储桶是个好主意吗? (例如:考虑两个具有不同流吞吐量的传输流,s3缓冲区大小/缓冲区间...)如果两个传递...

回答 2 投票 0

生成策略和签名值以将数据直接从HTML post请求存储到Amazon S3存储桶

import base64 import hmac,hashlib AWS_SECRET_ACCESS_KEY ='AKIAIHHMU7Y4L2INOFRQ'policy_document = {“expiration”:“2019-01-01T00:00:00Z”,“条件”:[{“bucket”:“report-generation1”},...

回答 1 投票 0

将文件从S3下载到EC2时出错

当我使用“wget”命令将文件从亚马逊S3下载到亚马逊EC2实例时,它会提供以下消息并且文件无法下载。如何解决这个问题..?命令: - >“wget https:// ...

回答 3 投票 1

快速获取AWS S3对象元数据

此问题如何读取S3存储桶中每个项目的元数据?处理如何在AWS S3上获取对象的元数据的方式,但是这个过程非常缓慢。即使我使用“boto3”我......

回答 1 投票 0

AWS S3 GetObjectAsync挂起/超时

注意:回答我自己的问题以帮助其他人。我正在按照官方文档从S3存储桶中获取文本文件并挂起:静态异步任务ReadObjectDataAsync(){...

回答 1 投票 2

将外部域名连接到AWS S3网站

我想在Amazon S3上托管一个静态网站。创建了相关的桶 - 测试它们没问题。现在我有一个域名我在EuroDNS注册 - www.gopropel.io - 我找不到如何连接它...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.