7

是否可以使用 NIO 处理来自 Process 的标准输出?我让它与 java.io 一起工作,但这是一个练习,可以更多地了解 NIO 并探索性能改进的可能性。

基本上,我想尽可能快地将大量文本从标准输出流式传输到缓冲区而不会阻塞,然后稍后处理该缓冲区的内容。问题是,我似乎无法找出正确的巫术来使它与 NIO 一起工作。这就是我现在的位置:

ProcessBuilder pb = new ProcessBuilder( ... );
Process p = pb.start();
stdout = new StreamConsumer(p.getInputStream());
new Thread(stdout).start();
// other stuff omitted for brevity

StreamConsumer 类如下所示:

class StreamConsumer implements Runnable
{
  private InputStream is;

  public StreamConsumer(InputStream is)
  {
    this.is = is;
  }

  public void run()
  {
    try
    {
      ReadableByteChannel source = Channels.newChannel(is);

      // Is it possible get a channel to a ByteBuffer 
      // or MappedByteBuffer here?
      WritableByteChannel destination = ??;
      ByteBuffer buffer = ByteBuffer.allocateDirect(128 * 1024);

      while (source.read(buffer) != -1)
      {
        buffer.flip();
        while (buffer.hasRemaining())
        {
          destination.write(buffer);
        }
        buffer.clear();
      }

      source.close();
      destination.close();
    }
    catch (IOException e)
    {
      e.printStackTrace();
    }
  }
}
4

3 回答 3

8

我创建了一个开源库,它允许在 java 和您的子进程之间进行非阻塞 I/O。该库提供了一个事件驱动的回调模型。它依赖于 JNA 库来使用特定于平台的原生 API,例如 Linux 上的 epoll、MacOS X 上的 kqueue/kevent 或 Windows 上的 IO Completion Ports。

该项目名为NuProcess,可在此处找到:

https://github.com/brettwooldridge/NuProcess

于 2013-09-17T03:57:48.087 回答
5

信不信由你,我认为你想要的可写字节通道是

ByteArrayOutputStream ostream = new ByteArrayOutputStream(<some large number>);
WritableByteChannel destination = Channels.newChannel(ostream);

然后当完成

ostream.toByteArray() 

包含要处理的字节。或者,如果你想要一个字节缓冲区,

ByteBuffer.wrap(ostream.toByteArray())

我在这里看不到您如何在可运行文件之外获得输出,但我怀疑您的原始代码有这种情况。否则,您可能希望StreamConsumer成为Callable<ByteBuffer>.

于 2009-06-23T16:46:02.500 回答
1

您可能希望 StreamConsumer 成为 Callable。

尝试的另一个非阻塞选项可能是使用 Guava 的 ListenableFuture 为您提供成功和失败回调,而无需解释您自己的错误。

于 2013-08-24T14:47:40.587 回答