3

猫 urllist.txt | xargs -P0 -n1 卷曲 | grep "HREF=" > out.txt

这工作正常,但它同时连接一个网址。我怎样才能同时卷曲 100 个网址?

4

2 回答 2

3

不要使用 xargs,而是使用并行来执行此操作。它与 xargs 非常相似,而是并行启动命令-因此得名...

于 2013-04-10T12:27:23.493 回答
0

如果要对 url 进行基准测试,请使用 apache benchmark。它随 httpd 一起提供。样品运行:

$ ab -n 100 -c 100 "<url>"

上面所做的是,以 100 的(c)并发访问 url 100 次

于 2013-08-02T08:23:34.477 回答