9

我继承了一些代码：

Process p = new ProcessBuilder("/bin/chmod", "777", path).start();
p.waitFor();

基本上，将键/值对作为文件存储在磁盘上是有一些古老且高度基于巫术的原因。我真的不想进入它。

但是，我留下了一堆 IO 异常：

Exception :Cannot run program "/bin/chmod": java.io.IOException: error=24, Too many open files
Message: Cannot run program "/bin/chmod": java.io.IOException: error=24, Too many open files

一堆我的意思是在 10k - 数百万的领域

我觉得 waitFor 调用是为了阻止这些发生，等待进程完成并退出，但是我认为 chmod 在文件实际关闭之前返回结果。有谁知道这是否会导致这些异常？

我的另一个倾向是，在 java 端打开和关闭数千个文件的速度不够快，而且还有其他事情发生，可能是某种形式的文件缓冲区没有被清除fw.close() 被调用。

我对java很陌生，这是一个让我难过的怪异。（很高兴该应用程序仍然以某种方式运行..在吐出一个非常大的日志文件之后）

任何人都可以想出一种方法来解决这个问题，清除缓冲区或将文件打开限制增加到 jvm 可以跟上自己的东西（假设这是问题所在）

4

4 回答 4

14

我假设您正在循环运行这些 chmod 命令 - 否则我不明白为什么您会遇到这么多异常。您可能会遇到死锁，因为您没有读取衍生进程的输出。ProcessBuilder在以前的日子里，那肯定曾经让我反感Runtime.exec()。

将您的代码段更改为上述模式：

try {
    ProcessBuilder pb = new ProcessBuilder("/bin/chmod", "777", path);    
    pb.redirectErrorStream(true); // merge stdout, stderr of process

    Process p = pb.start();
    InputStreamReader isr = new  InputStreamReader(p.getInputStream());
    BufferedReader br = new BufferedReader(isr);

    String lineRead;
    while ((lineRead = br.readLine()) != null) {
        // swallow the line, or print it out - System.out.println(lineRead);
    }

    int rc = p.waitFor();
    // TODO error handling for non-zero rc
}
catch (IOException e) {
    e.printStackTrace(); // or log it, or otherwise handle it
}
catch (InterruptedException ie) {
    ie.printStackTrace(); // or log it, or otherwise handle it
}

（信用：这个网站）看看这是否有助于这种情况。

于 2009-07-15T11:07:22.173 回答
7

感谢您的帮助，这应该可以解决其他地方发生的大量怪异问题。

使用您的（Vinay）示例和流关闭：

try{ 
  fw.close();

  ProcessBuilder pb = new ProcessBuilder("/bin/chmod", "777", path);

  pb.redirectErrorStream(true); // merge stdout, stderr of process
  p = pb.start();

  InputStreamReader isr = new  InputStreamReader(p.getInputStream());
  BufferedReader br = new BufferedReader(isr);

  String lineRead;
  while ((lineRead = br.readLine()) != null) {
    // swallow the line, or print it out - System.out.println(lineRead);
  }

} catch (Exception ioe) {
  Logger.logException(Logger.WARN, ioe.getMessage(), ioe);
} finally {
  try {
    p.waitFor();//here as there is some snipped code that was causing a different
                // exception which stopped it from getting processed

    //missing these was causing the mass amounts of open 'files'
    p.getInputStream().close();
    p.getOutputStream().close();
    p.getErrorStream().close(); 

  } catch (Exception ioe) {
    Logger.logException(Logger.WARN, ioe.getMessage(), ioe);
  }
}

从 John B Mathews的帖子中得到了这个想法。

于 2009-07-15T23:39:07.080 回答
0

如果不关闭文件，该过程似乎不太可能真正完成。这可能发生在非常大的线程中吗？或者也许其中一些实际上并没有完成（即，在某些情况下它挂在 waitFor 上）？

否则，我认为您将无法提高打开文件的限制。假设这是一个类 Unix 系统，“ulimit”命令可能就是你要找的。

于 2009-07-15T05:11:05.557 回答
0

如果您使用的是 JAVA 6，您还可以在 File 对象上尝试新的设置器（用于读取、写入、执行）。可能会慢一些，但它应该可以工作。

于 2009-07-15T06:18:04.923 回答