java - 如何使用 Java 从网站检索 URL？

Question

我想使用 HTTP GET 和 POST 命令从网站检索 URL 并解析 HTML。我该怎么做呢？

Answer 1

您可以将HttpURLConnection与URL结合使用。

URL url = new URL("http://example.com");
HttpURLConnection connection = (HttpURLConnection)url.openConnection();
connection.setRequestMethod("GET");
connection.connect();

InputStream stream = connection.getInputStream();
// read the contents using an InputStreamReader

Answer 2

执行 GET 的最简单方法是使用内置的 java.net.URL。但是，如前所述，httpclient 是正确的方法，因为它可以让您在其他人中处理重定向。

要解析 html，您可以使用html parser。