定期轮询具有大量文件的AWS S3存储桶中的新文件?

Urv*_*ida 1 amazon-s3 amazon-web-services

我有需要轮询AWS S3存储桶以获取新文件的情况.此外,它不仅仅是一个桶.有大约1000个桶,这些桶可能有很多文件.这种用例的常用策略/设计是什么?我需要在每次投票时使用新文件.我无法从存储桶中删除文件.

Mar*_*k B 8

您应该订阅S3事件通知而不是轮询:http://docs.aws.amazon.com/AmazonS3/latest/dev/NotificationHowTo.html

这些可以传递到SNS主题,SQS队列或触发Lambda函数.