1

我尝试从 html 中的表中读取数据。我定期阅读,表格长度总是变化,我不知道它的长度。但是表格总是采用相同的格式,所以我尝试识别一些模式并根据它的位置读取数据。html 的格式为:

<head>
<title>Some webside</title>
</head>
<body 
<tr><td> There are some information coming here</td></tr>
<tbody><table>
<tr><td><a href="d?k=101">First</a></td><td>London</td><td>24</td><td>3</td><td>19:00</td><td align="center"></td></tr>
<tr bgcolor="#cccccc"><td><a href="d?k=102">Second</a></td><td>NewYork</td><td>24</td><td>4</td><td>20:13</td><td align="center"></td></tr>
<tr><td><a href="d?k=201">Some surprise</a></td><td>Swindon</td><td>25</td><td>5</td><td>20:29</td><td align="center"></td></tr>
<tr bgcolor="#cccccc"><td><a href="d?k=202">Third</a></td><td>Swindon</td><td>24</td><td>6</td><td>20:45</td><td align="center"></td></tr>
</tbody></table>
<tr><td> There are some information coming here</td></tr>
</body>

我将 html 转换为字符串并通过它来读取数据,但我只想读取一次。我的代码是:

def ReadTable(m):
    refList = []
    firstId = 1
    nextId = 2
    k = 1
    helper = 1
    while firstId != nextId:
        row = []
        helper = m.find('<td><a href="d?k=', helper) + 17
        end_helper = m.find('">', helper)
        rowId = m[helper : end_helper]
        if k == 1:          # to check if looped again
            firstId = rowId
        else:
            nextId = rowId      
        row.append(rowId)
        helper = end_helper + 2
        end_helper = m.find('</a></td><td>', helper)
        rowPlace = m[helper : end_helper]
        row.append(rowPlace)
        helper = m.find('</a></td><td>', end_helper) + 13
        end_helper = m.find('</td><td>', helper)
        rowCity = m[helper : end_helper]
        row.append(rowCity)
        helper = end_helper + 9
        end_helper = m.find('</td><td>', helper)
        rowDay = m[helper : end_helper]
        row.append(rowDay)
        helper = end_helper + 9
        end_helper = m.find('</td><td>', helper)
        rowNumber = m[helper : end_helper]
        row.append(rowNumber)
        helper = end_helper + 9
        end_helper = m.find('</td>', helper)
        rowTime = m[helper : end_helper]
        row.append(rowTime)
        refList.append(row)
        k +=1
    return refList

if __name__ == '__main__':
    filePath = '/home/m/workspace/Tests/mainP.html'
    fileRead = open(filePath)
    myString = fileRead.read()
    print myString
    refList = ReadTable(myString)
    print 'Final List = %s' % refList

我希望结果是一个包含 4 个列表的列表,如下所示:

Final List = [['101', 'First', 'London', '24', '3', '19:00'], ['102', 'Second', 'NewYork', '24', '4', '20:13'], ['201', 'Some surprise', 'Swindon', '25', '5', '20:29'], ['202', 'Third', 'Swindon', '24', '6', '20:45']]

我希望在第一次循环之后再次读取字符串并再次firstId找到并且我while-loop将终止。相反,我有无限循环,我的列表开始看起来像这样:

Final List = [['101', 'First', 'London', '24', '3', '19:00'], ['102', 'Second', 'NewYork', '24', '4', '20:13'], ['201', 'Some surprise', 'Swindon', '25', '5', '20:29'], ['202', 'Third', 'Swindon', '24', '6', '20:45'], ['me webside</title>\n</head>\n<body \n<tr><td> There are some information coming here</td></tr>\n<tbody><table>\n<tr><td><a href="d?k=101', 'First', 'London', '24', '3', '19:00'], ['102', 'Second', 'NewYork', '24', '4', '20:13']...

我不明白为什么我helper开始这样做,我不知道应该如何编写这样的程序。你能建议一个好的/有效的方法来编写它或修复我的循环吗?

4

2 回答 2

2

我建议您花一些时间来研究LXML。它允许您查看 html 文件中的所有表格并使用组成表格的事物的子元素(如行和单元格)

LXML 不难使用,它允许你输入一个字符串

html.fromstring(somestring)

此外,在 SO 上已经提出并回答了很多 lxml 问题,因此不难找到可以工作的好例子

于 2012-11-24T18:21:45.217 回答
1

您没有检查 find 的返回值,并且在找不到匹配项时返回 -1。 http://docs.python.org/2/library/string.html#string.find 失败返回 -1

我更新了这部分代码,它现在按预期返回。下面的第一行和最后一行与您上面的内容相匹配,因此您可以找到替代品。

    row = []
    helper = m.find('<td><a href="d?k=', helper)
    if helper == -1:
        break
    helper += 17
    end_helper = m.find('">', helper)
于 2012-11-24T20:43:12.910 回答