我在另一个项目中使用了Jakarta commons HttpClient,我想要相同的线路日志输出,但使用“标准”HttpUrlConnection。
我使用Fiddler作为代理,但我想直接从 java 记录流量。
捕获连接输入和输出流的内容是不够的,因为 HTTP 标头是由 HttpUrlConnection 类编写和使用的,因此我将无法记录标头。
我在另一个项目中使用了Jakarta commons HttpClient,我想要相同的线路日志输出,但使用“标准”HttpUrlConnection。
我使用Fiddler作为代理,但我想直接从 java 记录流量。
捕获连接输入和输出流的内容是不够的,因为 HTTP 标头是由 HttpUrlConnection 类编写和使用的,因此我将无法记录标头。
根据Sun 的 HttpURLConnection 来源,有一些通过JUL的日志记录支持。
设置(根据需要调整路径):
-Djava.util.logging.config.file=/full/path/to/logging.properties
日志记录属性:
handlers= java.util.logging.ConsoleHandler
java.util.logging.ConsoleHandler.level = FINEST
sun.net.www.protocol.http.HttpURLConnection.level=ALL
这将记录到控制台,根据需要进行调整,例如记录到文件。
示例输出:
2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection writeRequests
FIN: sun.net.www.MessageHeader@16caf435 pairs: {GET /howto.html HTTP/1.1: null}{User-Agent: Java/1.6.0_20}{Host: www.rgagnon.com}{Accept: text/html, image/gif, image/jpeg, *; q=.2, */*; q=.2}{Connection: keep-alive}
2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection getInputStream
FIN: sun.net.www.MessageHeader@5ac0728 pairs: {null: HTTP/1.1 200 OK}{Date: Sat, 07 Aug 2010 04:00:33 GMT}{Server: Apache}{Accept-Ranges: bytes}{Content-Length: 17912}{Keep-Alive: timeout=5, max=64}{Connection: Keep-Alive}{Content-Type: text/html}
请注意,这仅打印没有正文的标题。
有关详细信息,请参阅http://www.rgagnon.com/javadetails/java-debug-HttpURLConnection-problem.html。
还有系统属性-Djavax.net.debug=all
。但它主要用于 SSL 调试。
我已经能够记录在默认流量之上实现我自己的SSLSocketFactory的所有 SSL 流量。
这对我有用,因为我们所有的连接都使用 HTTPS,我们可以使用HttpsURLConnection.setSSLSocketFactory方法设置套接字工厂。
可以在http://www.javaspecialists.eu/archive/Issue169.html找到更完整的解决方案,可以监控所有套接字。 感谢Lawrence Dol指出使用Socket.setSocketImplFactory的正确方向
这是我还没有准备好生产代码:
public class WireLogSSLSocketFactory extends SSLSocketFactory {
private SSLSocketFactory delegate;
public WireLogSSLSocketFactory(SSLSocketFactory sf0) {
this.delegate = sf0;
}
public Socket createSocket(Socket s, String host, int port,
boolean autoClose) throws IOException {
return new WireLogSocket((SSLSocket) delegate.createSocket(s, host, port, autoClose));
}
/*
...
*/
private static class WireLogSocket extends SSLSocket {
private SSLSocket delegate;
public WireLogSocket(SSLSocket s) {
this.delegate = s;
}
public OutputStream getOutputStream() throws IOException {
return new LoggingOutputStream(delegate.getOutputStream());
}
/*
...
*/
private static class LoggingOutputStream extends FilterOutputStream {
private static final Logger logger = Logger.getLogger(WireLogSocket.LoggingOutputStream.class);
//I'm using a fixed charset because my app always uses the same.
private static final String CHARSET = "ISO-8859-1";
private StringBuffer sb = new StringBuffer();
public LoggingOutputStream(OutputStream out) {
super(out);
}
public void write(byte[] b, int off, int len)
throws IOException {
sb.append(new String(b, off, len, CHARSET));
logger.info("\n" + sb.toString());
out.write(b, off, len);
}
public void write(int b) throws IOException {
sb.append(b);
logger.info("\n" + sb.toString());
out.write(b);
}
public void close() throws IOException {
logger.info("\n" + sb.toString());
super.close();
}
}
}
}
解决方案#1:使用装饰器模式
您必须在HttpURLConnection类上使用装饰器模式 来扩展它的功能。然后覆盖所有 HttpURLConnection 方法并将操作委托给组件指针以及捕获所需的信息并记录它。
还要确保覆盖父类URLConnection.getOutputStream() : OutputStream和URLConnection.html#getInputStream() : InputStream方法以返回修饰的OutputStream和InputStream对象。
.
解决方案#2:使用自定义的内存中 http 代理
编写一个简单的 http 代理服务器,并在应用程序启动和初始化期间让它在单独的线程中启动。请参阅示例简单代理服务器。
将您的应用程序配置为对所有请求使用上述 HTTP 代理。请参阅配置 Java 以使用代理。
现在你所有的流量都通过代理上面,就像它在提琴手中发生的一样。因此,您可以访问“从客户端到服务器”以及“从服务器返回到客户端”的原始 http 流。您必须解释这些原始信息并根据需要记录下来。
更新: 使用 HTTP 代理作为基于 SSL 的 Web 服务器的适配器。
== Client System ===============================
| |
| ------------------------------ |
| | | |
| | Java process | |
| | ---- | |
| | ---------- | | | |
| | | | -O | | |
| | | Logging | | | |
| | | Proxy <---HTTP-- | ----- |
| | | Adapter | | | | |
| | | Thread o------------------> | |
| | | o | | | | |
| | --------|- | | Log | |
| | | | ----- |
| ----------------|------------- |
| | |
=====================|==========================
|
|
HTTPS
SSL
|
== Server System ====|==========================
| | |
| ----------------|---------------- |
| | V | |
| | | |
| | Web Server | |
| | | |
| --------------------------------- |
| |
================================================
在 Linux 中,您可以在 strace 下运行 VM:
strace -o strace.out -s 4096 -e trace=network -f java ...
使用 Java 8 环境刷新:
关注@sleske 的回答
System.setProperty("javax.net.debug","all");
开箱即用为我工作。
也是@weberjn 的建议
strace -o strace.out -s 4096 -e trace=network -f java
但如果处理 SSL 流量则无用,因为它会转储编码流。
所有其他代码技巧都对我不起作用,但可能还不够努力。
我认为您不能自动执行此操作,但您可以将FilterOutputStream和FilterInputStream子类化,并将HttpUrlConnection
的输出和输入流作为参数。然后在写入/读取字节时,记录它们并将它们传递给底层流。
使用 AspectJ 插入切入点以围绕方法添加日志记录建议怎么样?我相信 AspectJ 可以将其融入私有/受保护的方法中。
看来 sun.net.www.protocol.http.HttpURLConnection.writeRequest 可能会调用 sun.net.www.http.HttpClient.writeRequest ,它将 MessageHeader 对象作为输入,因此这将是您的目标。
最后这可能会起作用,但会非常脆弱,并且只能在 Sun JVM 上运行;实际上,您只能信任您正在使用的确切版本。
如果您只对获取网络上的内容(标题、正文等)感兴趣,您可能想尝试一下wireshark。
这具有不必更改任何代码的优点,但如果通过代码启用日志记录是您所追求的,则此答案不适用。