aws-sdk S3：使用 listObjectsV2 列出所有键的最佳方法

Question

使用 listObjects API 调用的 v1 版本，您可以从这个 SO answer 执行类似操作。

 var allKeys = [];
function listAllKeys(marker, cb) {
  s3.listObjects({Bucket: s3bucket, Marker: marker}, function(err, data){
     allKeys.push(data.Contents);

    if(data.IsTruncated)
       listAllKeys(data.NextMarker, cb);
    else
       cb();
  });
}

listObjectsV2 函数的等价物是什么？

原文由 eljefedelrodeodeljefe 发布，翻译遵循 CC BY-SA 4.0 许可协议

Answer 1

这是从存储桶中获取密钥列表的代码。

 var params = {
    Bucket: 'bucket-name'
};

var allKeys = [];
listAllKeys();
function listAllKeys() {
    s3.listObjectsV2(params, function (err, data) {
        if (err) {
            console.log(err, err.stack); // an error occurred
        } else {
            var contents = data.Contents;
            contents.forEach(function (content) {
                allKeys.push(content.Key);
            });

            if (data.IsTruncated) {
                params.ContinuationToken = data.NextContinuationToken;
                console.log("get further list...");
                listAllKeys();
            }

        }
    });
}

原文由 notionquest 发布，翻译遵循 CC BY-SA 3.0 许可协议

Answer 2

我认为这是最好的方法：

 const AWS = require('aws-sdk');
const s3 = new AWS.S3();

const listAllKeys = (params, out = []) => new Promise((resolve, reject) => {
  s3.listObjectsV2(params).promise()
    .then(({Contents, IsTruncated, NextContinuationToken}) => {
      out.push(...Contents);
      !IsTruncated ? resolve(out) : resolve(listAllKeys(Object.assign(params, {ContinuationToken: NextContinuationToken}), out));
    })
    .catch(reject);
});

listAllKeys({Bucket: 'bucket-name'})
  .then(console.log)
  .catch(console.log);

原文由 Giovanni Bruno 发布，翻译遵循 CC BY-SA 3.0 许可协议