unix - Rsync 性能 - 同步单个大文件与同步多个小文件

Question

我正在使用 rsync 同步许多小文件（每个 4.5 MB）。我正在使用 18000 的 bwlimit。我将执行批量 rsync 命令，这样，

rsync -v dest_host:file1 dest_host:file2 dest_host:file3 dest_host:file4 dest_host:file5 ... src_dir。

但我观察到的是，在上述带宽下，我每分钟无法同步超过 4 个文件。这些是预期的吗？我想知道如果我同步一个 18 MB 的大文件，我可以更快地同步吗？

对于我的上述用例，是否有任何实用程序？

Answer 1

我设法回答了我自己的问题。

同步多个小文件会产生开销，例如在源和目标创建、打开、关闭文件。

当我们传输 100 个大小为 5 MB 的文件和一个大小为 500M MB 的文件时，这将非常重要。

因此，结论是，是的，同步单个大文件是有益的。