AWS S3 List Objects API - 如何获取具有特定前缀的 S3 存储桶中的所有对象

编程并不是一个机械性的工作，而是需要有思考，有创新的工作，语法是固定的，但解决问题的思路则是依靠人的思维，这就需要我们坚持学习和更新自己的知识。今天golang学习网就整理分享《AWS S3 List Objects API - 如何获取具有特定前缀的 S3 存储桶中的所有对象》，文章讲解的知识点主要包括，如果你对Golang方面的知识点感兴趣，就不要错过golang学习网，在这可以对大家的知识积累有所帮助，助力开发能力的提升。

我正在尝试列出 s3 存储桶中具有特定 prefix 的所有项目。这是我的目录结构：

item1/
     item2/
          item3/
               item4/
                     image_1.jpg
               item5/
                     image_1.jpg
                     image_2.jpg

当我将 prefex 设置为 item1/item2 时，我得到以下键的结果：

item1/item2/
item1/item2/item3/item4/image_1.jpg
item1/item2/item3/item5/image_1.jpg
item1/item2/item3/item5/image_2.jpg

我想要得到的是：

Item1/Item2/
Item1/Item2/Item3
Item1/Item2/Item3/Item4
Item1/Item2/Item3/Item5
Item1/Item2/Item3/Item4/image_1.jpg
Item1/Item2/Item3/Item5/image_1.jpg
Item1/Item2/Item3/Item5/image_2.jpg

有没有办法在golang中实现这一点？

解决方案

文件夹实际上并不存在于 amazon s3 中。它是一个扁平的对象存储系统。

例如，使用 AWS Command-Line Interface (CLI)，我可以将命令复制到 amazon s3 存储桶：

aws s3 cp foo.txt s3://my-bucket/folder1/folder2/foo.txt

即使 folder1 和 folder2 不存在，此功能也可以正常工作。这是因为对象是使用 key（文件名）存储的，其中包含对象的完整路径。所以，上面的对象实际上有一个 key（文件名）：

folder1/folder2/foo.txt

但是，为了让操作更方便，amazon s3 管理控制台使其看起来就像存在文件夹一样。在 s3 中，这些称为通用前缀而不是文件夹。

因此，当您在指定 prefix 的同时进行 api 调用以列出存储桶的内容时，它只会显示“列出 key 以该字符串开头的所有对象”。

您的列表不显示任何文件夹，因为它们实际上并不存在。

现在，只是为了自相矛盾，实际上可以创建文件夹（例如，通过在管理控制台中单击创建文件夹）。这实际上创建了一个与文件夹同名的零长度对象。然后该文件夹将出现在列表中，因为它实际上列出的是零长度对象而不是文件夹。

这可能就是为什么 item1/item2/ 出现在您的列表中，但 item1/item2/item3 没有出现的原因。有人在某个阶段必须“创建了一个名为 item1/item2/ 的文件夹”，该文件夹实际上使用该 key 创建了一个零长度对象。

到这里，我们也就讲完了《AWS S3 List Objects API - 如何获取具有特定前缀的 S3 存储桶中的所有对象》的内容了。个人认为，基础知识的学习和巩固，是为了更好的将其运用到项目中，欢迎关注golang学习网公众号，带你了解更多关于的知识点！