0

我正在尝试将位于外部 Web 服务器上的一些日志文件移动到 Amazon S3 存储桶。这应该每 7 天发生一次，无需手动激活它。此外，我希望它是“故障安全的”，因此最好在亚马逊云中完成复制操作。我已经阅读了有关 AWS Data Pipelining 解决方案的一些内容，但我找不到任何关于如何让它与外部（这意味着不是由 Amazon 托管）数据源一起工作的内容，更不用说从网络服务器下载文件然后处理了它。有人有类似问题的经验吗？对我有什么建议从哪里开始？

谢谢！

4

1 回答 1

2

我不相信任何现有的组件会立即执行您想要的操作，但您始终可以将脚本作为数据管道的一部分运行。我用这种方式运行了一个脚本，该脚本从外部 FTP 抓取文件，然后每小时将它们加载到 S3 存储桶中。

于 2013-11-07T15:49:52.583 回答