8

我两者都用过,我得出结论,我可以用 tcpflow 从网页中读取 html 数据,但不能用 tcpdump 读取。我得到的最好的结果是一些带有很多句点符号的丑陋 ASCII 文本。

我的理解是 tcpdump 不会重新组装数据包,而 tcpflow 会。但是,如果这是关键区别,那么来自 tcpdump 的数据包数据是否仍然是人类可读的 - 只是在更小的块中?问题是 tcpdump 仅限于 ASCII 并且大多数网络流量都以 UTF-8 编码吗?

我是网络分析/编程的新手,如果我遗漏了一些明显的东西,请原谅我。

4

2 回答 2

12

要获得加密数据,应该使用带有选项tcpdump –A(大写 a)的 tcpdump。它传输没有任何标题的文本,主要用于网页。因此我们很容易得到响应页面。

我认为您在应用层和传输层数据包之间感到困惑。

我不了解 tcpflow,但 tcpdump 捕获整个数据包(包括标头和所有其他内容)而不仅仅是数据。您提到的 html 数据将位于 tcp/udp/icmp 数据包的数据部分中,无论您使用的是什么所以它还需要你了解 tcp/udp/icmp 数据包的结构......

我在我的机器上捕获了这个数据包并且 HTML 数据清晰可见,您需要编写脚本以了解数据包结构从输出中获取它。

 16:15:17.968325 IP 172.31.9.84.80 > 172.31.9.177.56559: P 2575928381:2575928808(427)     
 ack 65285447 win 1716 <nop,nop,timestamp 21031622 15165633>
0x0000:  4500 01df 66fd 4000 4006 66d8 ac1f 0954    E...f.@.@.f....T
0x0010:  ac1f 09b1 0050 dcef 9989 8c3d 03e4 2d47  ..... P.....=..-G
0x0020:  8018 06b4 1a2a 0000 0101 080a 0140 eac6     .....*.......@..
0x0030:  00e7 68c1 4854 5450 2f31 2e31 2032 3030    ..h.HTTP/1.1.200
0x0040:  204f 4b0d 0a44 6174 653a 2046 7269 2c20    .OK..Date:.Fri,.
0x0050:  3130 204a 756c 2032 3030 3920 3130 3a32    10.Jul.2009.10:2
0x0060:  303a 3136 2047 4d54 0d0a 5365 7276 6572    0:16.GMT..Server
0x0070:  3a20 4170 6163 6865 2f32 2e30 2e35 3220    :.Apache/2.0.52.
0x0080:  2852 6564 2048 6174 290d 0a4c 6173 742d    (Red.Hat)..Last-
0x0090:  4d6f 6469 6669 6564 3a20 4672 692c 2031    Modified:.Fri,.1
0x00a0:  3020 4a75 6c20 3230 3039 2030 393a 3331    0.Jul.2009.09:31
0x00b0:  3a30 3420 474d 540d 0a45 5461 673a 2022    :04.GMT..ETag:."
0x00c0:  3266 6231 3333 2d37 372d 6131 3935 3436    2fb133-77-a19546
0x00d0:  3030 220d 0a41 6363 6570 742d 5261 6e67     00"..Accept-Rang
0x00e0:  6573 3a20 6279 7465 730d 0a43 6f6e 7465    es:.bytes..Conte
0x00f0:  6e74 2d4c 656e 6774 683a 2031 3139 0d0a    nt-Length:.119..
0x0100:  4b65 6570 2d41 6c69 7665 3a20 7469 6d65    Keep-Alive:.time
0x0110:  6f75 743d 3135 2c20 6d61 783d 3130 300d    out=15,.max=100.
0x0120:  0a43 6f6e 6e65 6374 696f 6e3a 204b 6565    .Connection:.Kee
0x0130:  702d 416c 6976 650d 0a43 6f6e 7465 6e74    p-Alive..Content
0x0140:  2d54 7970 653a 2074 6578 742f 6874 6d6c    -Type:.text/html
0x0150:  3b20 6368 6172 7365 743d 4953 4f2d 3838     ;.charset=ISO-88
0x0160:  3539 2d31 0d0a 0d0a 3c68 746d 6c3e 0a0a    59-1....<html>..
0x0170:  3c62 6f64 793e 0a49 6e64 6961 6e20 696e    <body>.Indian.in
0x0180:  7374 6974 7574 6520 6f66 2074 6563 686e    stitute.of.techn
0x0190:  6f6c 6f67 7920 2e2e 2e2e 2e20 7468 6973     ology.......this
0x01a0:  2069 7320 7468 6520 7465 7374 2070 6167    .is.the.test.pag
0x01b0:  652e 0a3c 4120 6872 6566 3d22 6164 2e68    e..<A.href="ad.h
0x01c0:  746d 6c22 3e61 6263 643c 2f41 3e0a 0a3c    tml">abcd</A>..<
0x01d0:  2f62 6f64 793e 0a3c 2f68 746d 6c3e 0a          /body>.</html>.

最后 7-8 行描述了 html 数据。

用于-s0捕获整个帧并-X以上述 ASCII 人类可读格式打印。

要获得该加密数据,应使用带有选项 –A(大写 a)的 TCPDUMP。它传输没有任何标题的文本,主要用于网页。因此我们很容易得到响应页面。

例如:

我在 80 端口向 172.31.9.84 请求 index.html

然后我请求 GET/index.html(仅包含文本“Indian Institute of Technology this is the test page”的示例页面)

此刻,当我捕获数据包时,我得到了以下信息:

Request:

18:10:42.387426 IP 172.31.9.177.42943 > 172.31.9.84.80:
P 1:15(14) ack 1 win 46 <nop,nop,timestamp 6644101 353753635>
E..B.G@.@........T...P^R.Mb.L.....ke.....
.ea....#GET /index.html

Response:

18:10:42.388127 IP 172.31.9.84.80 > 172.31.9.177.42943: P 1:53(52) 
ack 15 win 1448 <nop,nop,timestamp 353758368 6644101>
E..h..@.@.8m..T..   ..P..b.L.^R.[....d......
.....ea.<html>

<body>
Indian institute of technology this is the test page
</body>
</html>
于 2011-11-27T23:19:28.813 回答
3

尝试使用 tcpdump 获取 HTTP 数据时,如果应用 -A 选项,您将看到 ASCII 明文。但是,HTTP 数据几乎总是使用 gzip 模式或其他方式进行压缩。您可以在标题中看到它:

内容编码:gzip、compress、bzip2

因此,tcpdump 将在您的屏幕上输出几个字节,它们是压缩数据!!!您将需要使用 tshark 或 wireshark 来查看平面数据。那么你的问题不是UTF8。

您可以在 Apache Web 服务器中测试 tcpdump 数据显示禁用 deflate 模块。

希望这有帮助。

于 2013-03-20T23:15:01.867 回答