qsub - 多个qsub提交可以读取同一组文件吗？

Question

我想使用 bash 脚本和 qsub 一次运行 30-40 个 python 程序。每个 python 程序读取和搜索同一组文件（总共约 400 个）以查找一组序列。是否存在多个 python 程序可能试图从同一个文件中读取的问题？如果是这样，后果是什么？

Answer 1

从 Torque 强加的相同文件中读取多个作业没有问题。（我认为对于任何资源管理器/调度器来说，这种说法都可能是正确的。）

我可以想象的主要问题是您的文件系统的性能以及它是否可以跟上对这些文件的潜在并发访问。