问题标签 [lsf]

bjobs -l 给出了 CWD 被分成 3 行的工作的详细描述。我想要一个可以可靠地获取 CWD 的命令。

假设我有一个有 10 个 slotn 的主机，我对该主机应用了用户限制，如下所示：SLOT = 5 JOB = 3

是否有命令来查找该主机是否可以从该用户运行更多作业？或者，是否有命令来查找所述主机是否为所述用户关闭。

提前致谢！

当我输入“ lshosts”时，我得到：

我试图以兆字节返回，而不是在调用时返回千兆maxmem字节。我正在尝试将 Xilinx ISE 作业发送到我的 LSF，但是该软件需要整数、兆字节值和. 通过调试，软件似乎使用命令获取了这些参数。maxswplshostsmaxmemmaxswplshosts

我已经签入了我的 lsf.conf 文件：

我曾尝试搜索 IBM 知识库，但无济于事。

您是否使用特定命令来指定lsf.conf、lsf.shared 或其他配置文件中的单位maxmem？maxswp

还是 LSF 部队回归最实用的单位？

有什么办法可以覆盖这个吗？

我正在寻找一些一般性建议，而不是编码解决方案。基本上，当通过 bsub 提交作业时，我可以通过指定以下任何一项来检索 Stdin/Stdout 的日志：

这些都很棒，但是我的程序在提交给 bsub 时会创建一个文件夹并存储在远程服务器上。基本上我想

a) 检索文件夹及其内容 b) 作业完成时自动执行此操作

所以我可以在技术上使用scp -r，但是我必须手动执行此操作。如果我在工作完成后收到电子邮件警报，那还不错，但仍然 - 我必须手动执行此操作。

所以到b）：

好吧，我看不到 bsub 检索实际结果的任何特殊标志，只有 StdOut。我想我可以有一个使用sleep并设置工作时间的脚本（为了安全起见可能有点逗留），比如

但是我有点担心被注销等以及脚本在作业完成之前终止。

有没有人有什么建议？

我本质上想要一个界面（将来的网站），用户可以在其中提交文件，远程分析文件，在工作开始/完成时向用户发送电子邮件，结果自动检索回本地/网络服务器，用户收到电子邮件说他们可以选择提高他们的成绩。

不过一步一步！

我必须在使用 LSF 作为平台提交作业的计算机集群上运行一些基准测试。我需要在不同的数据库上运行这些基准。其中一些需要在侦听来自客户端的连接之前运行服务器（如 PostgreSQL 或 Redis）。

有没有办法使用 LSF 在集群上运行服务器？

我正在使用以下命令列出所有用户以及 LSF 中的待处理作业：

示例输出：

我正在寻找一个只显示 NJOBS 值大于 0 的用户的命令，即那些实际提交了至少一份工作的用户。

在示例中，这意味着只有用户 'bbbbb' 和 'ccccc' 的行应该出现。

我们在公司内部进行一些文件处理\计算 简单地说，我们有一项工作或任务涉及读取一个包含超过十亿条记录的大文件，解析文件并进行一些清理并将清理后的数据写入另一个文件。我们有数百个这样的工作不断被创建、提交、运行。每个作业都处理自己的文件，因此我们不必担心并发问题。

为此，我们构建了自己的调度系统（MainFrame 和 Java 的组合）。我们目前的吞吐量约为每小时 4000 万条记录。

在我们追求更好（并提供更多容错能力）的过程中，我们正在评估 IBM 的 LSF 以帮助我们进行这种调度和创建作业。

你们有没有人觉得使用 LSF 可能会解决这个问题？我可以考虑使用 AKKA 中的参与者模型实现并围绕它编写自己的作业调度程序来实现相同的目标。

有什么想法吗？

我试图使用 bsub -F 选项设置最大文件大小。但是没有手册建议最大值。

可以请一些机构帮助设置文件大小限制的最大值。

我正在开发一个多线程数字运算应用程序，我们称之为myprogram. 我计划myprogram在 IBM 的 LSF 网格上运行。LSF 允许在不同机器的 CPU 上调度作业。例如，bsub -n 3 ... myprogram ...可以从 node1 分配两个 CPU，从 node2 分配一个 CPU。

我知道我可以要求 LSF 在同一个节点中分配所有 3 个内核，但我对将我的作业安排到不同节点上的情况感兴趣。

1. LSF 如何管理这个？会myprogram在node1和node2的两个不同进程中运行吗？

2. LSF 会自动管理 node1 和 node2 之间的数据传输吗？

3. 我能做些什么myprogram来让 LSF 轻松管理这件事？我应该使用任何 LSF 库吗？

这是对我的旧问题的扩展：使用 system 将哈希对象从一个 perl 脚本传递到另一个。@Sobrique 在那里回答了我的问题。

现在，我想知道我是否可以以与我上面的问题相同的方式将哈希对象传递给另一个 perl 脚本，但使用bsub.

包装脚本：script1.pl

some_other_script.pl

我怎样才能做到这一点？任何帮助将非常感激。

谢谢！