管道中的AWS s3源有没有办法检测实际的文件更改？

Question

我已将 s3 存储桶配置为我的管道的源。

但是每当我上传文件时，管道就会触发，无论新更新的文件是否完全相同/没有变化。

我想知道是否有一个配置只会触发管道来检测文件的实际更改。

Answer 1

put 确实发生了，所以从 S3 的角度来看，对象已经改变了。因此，即使新文件恰好与旧文件相同，管道也会触发。毕竟，您还会看到添加到版本历史记录等中的先前对象版本。

如果您控制上传过程，我建议首先获取对象元数据，并且仅在实际不匹配时才放置更新版本（例如不同的 MD5 哈希值）。这是有道理的，因为它还可以节省上传本身。