寻找AWK替代品以加快此命令的速度

Question

我一直在使用AWK来执行此命令，但是它太慢了。

必须有一种更快的方法来处理来自aws s3 ls command的列表

s5cmd ls s3://bucket-name/* | awk -v AWS_BUCKET="bucket-name" '{cmd="aws s3api put-object-acl --access-control-policy file:///access_policy.json --bucket " AWS_BUCKET " --key "$5; system(cmd); print $5}'

这基本上列出了所有对象，然后将ACL应用于它们。

有什么想法吗？

Answer 1

而不是代替每行执行system(cmd)，您可能只想打印所有命令，然后将输出传递到sh中以执行它们。

s5cmd ls s3://bucket-name/* |
  awk -v AWS_BUCKET="bucket-name" -v '{
    printf "aws s3api put-object-acl --access-control-policy file:///access_policy.json --bucket %s --key %s\n", AWS_BUCKET, $5
  }' |
  sh

您在那里有那个流浪-v。我认为这是一个错字，或者您删除了一些敏感内容。