S3的ListObjects API有什么限制？对数据导入有何影响？

S3的ListObjects API最大的限制是只支持按字典序（lexicographic order）遍历对象，不支持按时间进行过滤或排序。这个限制对数据导入的影响非常显著。当需要发现最新写入的文件时，可能需要遍历整个目录树才能找到，无法直接获取「最近N分钟新增的文件」。如果S3 bucket中已经积累了上亿个历史文件，一次全量扫描可能需要数分钟甚至更长时间。对于每分钟新增上千个文件的场景，全量遍历方式根本无法满足实时性要求。如果只做增量遍历，又可能因为文件命名不规则而遗漏数据。因此需要设计更智能的文件发现策略，比如利用S3事件通知（S3 Event Notification）或SQS消息队列来实时获取新文件的创建事件，避免依赖低效的列表遍历。