51

我在另一个项目中使用了Jakarta commons HttpClient,我想要相同的线路日志输出,但使用“标准”HttpUrlConnection。

我使用Fiddler作为代理,但我想直接从 java 记录流量。

捕获连接输入和输出流的内容是不够的,因为 HTTP 标头是由 HttpUrlConnection 类编写和使用的,因此我将无法记录标头。

4

8 回答 8

60

根据Sun 的 HttpURLConnection 来源,有一些通过JUL的日志记录支持。

设置(根据需要调整路径):

-Djava.util.logging.config.file=/full/path/to/logging.properties

日志记录属性:

handlers= java.util.logging.ConsoleHandler
java.util.logging.ConsoleHandler.level = FINEST
sun.net.www.protocol.http.HttpURLConnection.level=ALL

这将记录到控制台,根据需要进行调整,例如记录到文件。

示例输出:

2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection writeRequests
FIN: sun.net.www.MessageHeader@16caf435 pairs: {GET /howto.html HTTP/1.1: null}{User-Agent: Java/1.6.0_20}{Host: www.rgagnon.com}{Accept: text/html, image/gif, image/jpeg, *; q=.2, */*; q=.2}{Connection: keep-alive}
2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection getInputStream
FIN: sun.net.www.MessageHeader@5ac0728 pairs: {null: HTTP/1.1 200 OK}{Date: Sat, 07 Aug 2010 04:00:33 GMT}{Server: Apache}{Accept-Ranges: bytes}{Content-Length: 17912}{Keep-Alive: timeout=5, max=64}{Connection: Keep-Alive}{Content-Type: text/html}

请注意,这仅打印没有正文的标题。

有关详细信息,请参阅http://www.rgagnon.com/javadetails/java-debug-HttpURLConnection-problem.html

还有系统属性-Djavax.net.debug=all。但它主要用于 SSL 调试

于 2012-09-09T14:00:40.793 回答
16

我已经能够记录在默认流量之上实现我自己的SSLSocketFactory的所有 SSL 流量。

这对我有用,因为我们所有的连接都使用 HTTPS,我们可以使用HttpsURLConnection.setSSLSocketFactory方法设置套接字工厂。

可以在http://www.javaspecialists.eu/archive/Issue169.html找到更完整的解决方案,可以监控所有套接字。 感谢Lawrence Dol指出使用Socket.setSocketImplFactory的正确方向

这是我还没有准备好生产代码:

public class WireLogSSLSocketFactory extends SSLSocketFactory {

    private SSLSocketFactory delegate;

    public WireLogSSLSocketFactory(SSLSocketFactory sf0) {
        this.delegate = sf0;
    }

    public Socket createSocket(Socket s, String host, int port,
            boolean autoClose) throws IOException {
        return new WireLogSocket((SSLSocket) delegate.createSocket(s, host, port, autoClose));
    }

    /*
    ...
    */

    private static class WireLogSocket extends SSLSocket {

        private SSLSocket delegate;

        public WireLogSocket(SSLSocket s) {
            this.delegate = s;
        }

        public OutputStream getOutputStream() throws IOException {
            return new LoggingOutputStream(delegate.getOutputStream());
        }

        /*
        ...
        */

        private static class LoggingOutputStream extends FilterOutputStream {
            private static final Logger logger = Logger.getLogger(WireLogSocket.LoggingOutputStream.class);
            //I'm using a fixed charset because my app always uses the same. 
            private static final String CHARSET = "ISO-8859-1";
            private StringBuffer sb = new StringBuffer();

            public LoggingOutputStream(OutputStream out) {
                super(out);
            }

            public void write(byte[] b, int off, int len)
                    throws IOException {
                sb.append(new String(b, off, len, CHARSET));
                logger.info("\n" + sb.toString());
                out.write(b, off, len);
            }

            public void write(int b) throws IOException {
                sb.append(b);
                logger.info("\n" + sb.toString());
                out.write(b);
            }

            public void close() throws IOException {
                logger.info("\n" + sb.toString());
                super.close();
            }
        }
    }
}
于 2010-02-16T11:02:48.693 回答
10

解决方案#1:使用装饰器模式

您必须在HttpURLConnection类上使用装饰器模式 来扩展它的功能。然后覆盖所有 HttpURLConnection 方法并将操作委托给组件指针以及捕获所需的信息并记录它。

还要确保覆盖父类URLConnection.getOutputStream() : OutputStreamURLConnection.html#getInputStream() : InputStream方法以返回修饰的OutputStreamInputStream对象。

.

解决方案#2:使用自定义的内存中 http 代理

编写一个简单的 http 代理服务器,并在应用程序启动和初始化期间让它在单独的线程中启动。请参阅示例简单代理服务器

将您的应用程序配置为对所有请求使用上述 HTTP 代理。请参阅配置 Java 以使用代理

现在你所有的流量都通过代理上面,就像它在提琴手中发生的一样。因此,您可以访问“从客户端到服务器”以及“从服务器返回到客户端”的原始 http 流。您必须解释这些原始信息并根据需要记录下来。

更新: 使用 HTTP 代理作为基于 SSL 的 Web 服务器的适配器。

  == Client System =============================== 
  |                                              | 
  |    ------------------------------            | 
  |   |                              |           | 
  |   |    Java process              |           | 
  |   |                       ----   |           | 
  |   |        ----------    |    |  |           | 
  |   |       |          |    -O  |  |           | 
  |   |       |  Logging |        |  |           | 
  |   |       |   Proxy <---HTTP--   |    -----  | 
  |   |       |  Adapter |           |   |     | | 
  |   |       |  Thread o------------------>   | | 
  |   |       |        o |           |   |     | | 
  |   |        --------|-            |   | Log | | 
  |   |                |             |    -----  | 
  |    ----------------|-------------            | 
  |                    |                         | 
  =====================|========================== 
                       |                           
                       |                           
                     HTTPS                         
                      SSL                          
                       |                           
  == Server System ====|========================== 
  |                    |                         | 
  |    ----------------|----------------         | 
  |   |                V                |        | 
  |   |                                 |        | 
  |   |   Web Server                    |        | 
  |   |                                 |        | 
  |    ---------------------------------         | 
  |                                              | 
  ================================================ 
于 2010-02-18T19:40:43.877 回答
6

在 Linux 中,您可以在 strace 下运行 VM:

strace -o strace.out -s 4096 -e trace=network -f java ...

于 2015-12-30T15:13:38.060 回答
4

使用 Java 8 环境刷新:

关注@sleske 的回答

System.setProperty("javax.net.debug","all");

开箱即用为我工作。

也是@weberjn 的建议

strace -o strace.out -s 4096 -e trace=network -f java

但如果处理 SSL 流量则无用,因为它会转储编码流。

所有其他代码技巧都对我不起作用,但可能还不够努力。

于 2019-01-23T09:37:06.220 回答
2

我认为您不能自动执行此操作,但您可以将FilterOutputStreamFilterInputStream子类化,并将HttpUrlConnection的输出和输入流作为参数。然后在写入/读取字节时,记录它们并将它们传递给底层流。

于 2009-09-18T17:44:04.813 回答
2

使用 AspectJ 插入切入点以围绕方法添加日志记录建议怎么样?我相信 AspectJ 可以将其融入私有/受保护的方法中。

看来 sun.net.www.protocol.http.HttpURLConnection.writeRequest 可能会调用 sun.net.www.http.HttpClient.writeRequest ,它将 MessageHeader 对象作为输入,因此这将是您的目标。

最后这可能会起作用,但会非常脆弱,并且只能在 Sun JVM 上运行;实际上,您只能信任您正在使用的确切版本。

于 2010-02-19T17:33:58.273 回答
2

如果您只对获取网络上的内容(标题、正文等)感兴趣,您可能想尝试一下wireshark

这具有不必更改任何代码的优点,但如果通过代码启用日志记录是您所追求的,则此答案不适用。

于 2010-02-23T14:49:30.103 回答