0

我正在尝试从表中获取值,但对如何正确执行此操作有点困惑。我想从以下页面检索 Strike/Symbol/Bid/Ask:http: //finance.yahoo.com/q/op?s=MSFT &m=2012-09

对于我的代码,我尝试了很多东西,但也许我没有正确理解如何使用 Xpath。

private void optionchainButton_Click(object sender, EventArgs e)
        {
            string URL = "http://finance.yahoo.com/q/op?s=" + tickerEditBox.Text;
            string HtmlFile = @".\localfile.html";

            using (WebClient client = new WebClient ()) // WebClient class inherits IDisposable
            {
                client.Proxy = null;
                //client.DownloadFile(URL, @".\localfile.html");
                HtmlWeb hw = new HtmlWeb();
                HtmlAgilityPack.HtmlDocument htmlDoc = hw.Load(URL);
                if (htmlDoc.DocumentNode != null)
                {
                    foreach (HtmlNode text in htmlDoc.DocumentNode.SelectNodes("//table/tbody/tr/td/text()"))
                    {
                        Console.WriteLine(text.InnerText);
                    }
                }

            }

        }
4

1 回答 1

1

对于 HtmlAgilityPack 的替代方案,请尝试CsQuery(在 nuget 上称为“CsQuery”),您可以使用可能更熟悉的 CSS 选择器和 jQuery API,并且可以轻松进行这种解析。以下是我将如何使用 CsQuery:

string URL = "http://finance.yahoo.com/q/op?s=MSFT&m=2012-09";

CQ doc = CQ.CreateFromUrl(URL);

// The two tables have a class "yfnc_datamodoutline1", but wrap an inner table 
// too.
// This selector gets the rows of the child table where the actual data lies

var rows = doc.Select(".yfnc_datamodoutline1 table tr");

// Each th header has the class ".yfnc_tablehead1" - figure out which column 
// to use for the four parts you are interested in by finding the appropriate
// header column based on the title, and grabbing it's index

var headers = rows.First().Find(".yfnc_tablehead1");

int strikeIndex = headers.Filter(":contains('Strike')").Index();
int symbolIndex = headers.Filter(":contains('Symbol')").Index();
int bidIndex = headers.Filter(":contains('Bid')").Index();
int askIndex = headers.Filter(":contains('Ask')").Index();

// iterate over all rows, except the header one (the "has" excludes the header 
// row)

foreach (var row in rows.Has("td")) {
    CQ cells = row.Cq().Find("td");

    string output = String.Format("Strike: {0} Symbol: {1} Bid: {2} Ask: {3}",
        cells[strikeIndex].Cq().Text(),
        cells[symbolIndex].Cq().Text(),
        cells[bidIndex].Cq().Text(),
        cells[askIndex].Cq().Text());

     Console.WriteLine(output);
}

如果您熟悉 CSS 和 jQuery,则方法和选择器应该是有意义的,除了Cq()最后一个循环中的方法。这只是将一个元素包装为一个CQ对象,因此您可以使用 jQuery API 来处理它。$(row)这与在 jQuery中包装 DOM 元素的做法完全相同。也就是说,当你迭代一个 jQuery 对象时,你得到的是实际的 DOM 元素,而不是更多的 jQuery 对象,所以如果你想对循环中的每个元素使用 jQuery API,你需要再次将它们包装在 jQuery 中。这就是您在 CsQuery 中的操作方式。jQuery 中的相同循环将被编码为:

rows.Has("td").each(function(i,row) {
    var cells = $(row).find("td"); 
    ..
});

我已经测试了这段代码,它可以工作并返回如下输出:

Strike: 20.00 Symbol: MSFT120922C00020000 Bid: N/A Ask: N/A
Strike: 21.00 Symbol: MSFT120922C00021000 Bid: N/A Ask: N/A
Strike: 22.00 Symbol: MSFT120922C00022000 Bid: N/A Ask: N/A
Strike: 23.00 Symbol: MSFT120922C00023000 Bid: N/A Ask: N/A
Strike: 24.00 Symbol: MSFT120922C00024000 Bid: N/A Ask: N/A
Strike: 25.00 Symbol: MSFT120922C00025000 Bid: N/A Ask: N/A

...

于 2012-08-20T12:38:06.297 回答