1

我一直在尝试让 BeautifulSoup (3.1.0.1) 解析一个 html 页面,该页面有很多在标签内生成 html 的 javascript。一个示例片段如下所示:

<html><head><body><div>
<script type='text/javascript'>

if(ii > 0) {
html += '<span id="hoverMenuPosSepId" class="hoverMenuPosSep">|</span>'
}
html += 
'<div class="hoverMenuPos" id="hoverMenuPosId" onMouseOver=\"menuOver_3821();\" ' +
'onMouseOut=\"menuOut_3821();\">';
if (children[ii].uri == location.pathname) {
html += '<a class="hiHover" href="' +  children[ii].uri + '" ' + onClick + '>';
} else {
html += '<a class="hover" href="' +  children[ii].uri + '" ' + onClick + '>';
}
html += children[ii].name + '</a></div>';
}
}          
hp = document.getElementById("hoverpopup_3821");
hp.style.top = (parseInt(hoveritem.offsetTop) + parseInt(hoveritem.offsetHeight)) + "px";
hp.style.visibility = "Visible";
hp.innerHTML = html;
}
return false;
}
function menuOut_3821() {
timeOn_3821 =  setTimeout("showSelected_3821()",  1000)             
}
var timeOn_3821 = null;
function menuOver_3821() {
clearTimeout(timeOn_3821)
}   
function showSelected_3821() {
showChildrenMenu_3821( 
document.getElementById("flatMenuItemAnchor" + selectedPageId), selectedPageId);
}
</script>
</body>
</html>

BeautifulSoup 似乎无法处理这个问题,并抱怨 onMouseOver=**\"**menuOver_3821();\" 周围的“格式错误的开始标签”。似乎尝试解析由脚本块内的javascript生成的xml?!?

任何想法如何让 BeautifulSoup 忽略脚本标签内容?

我已经看到了使用 lxml 的其他建议,但不能,因为它必须在 Google AppEngine 上运行。

4

3 回答 3

1

恢复到 BeautifulSoup 3.0.7a解决了这个问题以及 3.1.0.1 阻塞的许多其他 html 奇怪问题。

于 2009-11-14T10:56:52.753 回答
0

这会起作用,但 BeautifulSoup 的重点是解析你扔给它的任何标签汤,即使它的格式非常糟糕。

于 2009-11-14T11:09:28.237 回答
0

我以前遇到过这种问题,我通常做的是将每次出现的<scriptwith<!--</script>with替换掉-->。这样,所有<script></script>标签都被注释掉了。

于 2009-11-14T02:50:16.457 回答