无法将350 GB的数据从一个存储桶复制到Google云中的另一个存储桶

问题描述 投票:-1回答:1

我正在尝试将数据从一个存储桶移动到Google Cloud上同一项目中的另一个存储桶。它具有简单的图像和文档,例如.png,.jpg和.pdf文件。我尝试了几次,但结果保持不变。

下面是我正在使用的命令,gsutil -m cp -r -n gs:// bucket1 / folder1 / subfolder / * gs:// bucket2 / folder1 / subfolder / 2>&1 | tee ./result.txt

它运行了几个小时,一段时间后屏幕进入挂起状态,我看不到Google控制台上正在运行任何日志。

我的疑问如下,GCP上是否有任何设置,如果网络流量持续几个小时,它将阻塞流量,诸如此类?铲斗高度上有尺寸上限吗?如果是,我该如何检查?

我是否必须在上述命令中添加任何其他参数?您对完成此任务还有其他建议吗?

google-cloud-platform copy bucket
1个回答
0
投票

我建议尝试使用Storage Transfer Service完成任务。

Storage Transfer Service是使您能够执行以下操作的产品:

1。将数据从其他云存储提供商或本地存储移动或备份到云存储桶。

> 2.将数据从一个Cloud Storage存储桶移动到另一个,以便可供不同组的用户或应用程序使用

3。作为数据处理管道或分析工作流的一部分,定期移动数据。

Creating and managing data transfers with the Console

© www.soinside.com 2019 - 2024. All rights reserved.