2

我试图废弃网站的内容。然而，在输出中我得到了不需要的空间，因此我无法解释这个输出。我使用一个简单的代码：

 import urllib2
 from bs4 import BeautifulSoup
 html= 'http://idlebrain.com/movie/archive/index.html'
 soup = BeautifulSoup(urllib2.urlopen(html).read())
 print(soup.prettify(formatter=None))

OUTPUT::(输出非常大，所以只占一小部分，以便了解我面临的问题）

       <html><head><title>Telugu cinema reviews by Jeevi - idlebrain.com</title> 
        <meta content="text/html; charset=utf-8" http-equiv="Content-Type"/>
        </head><bodybgcolor="#FFFFFF" leftmargin="0" marginheight="0" marginwidth="0" topmargin="0"><table border="0" cellpadding="0" cellspacing="0" width="96%">
    <tr>
    <td align="left"> <img alt="Idlebrain.Com" height="63" src="../../image/vox_r01_c2.gif"width="264"/></td>
   <td><div align="right"><script type="text/javascript"><!--
      g   o   o   g   l   e   _   a   d   _   c   l   i   e   n   t       =       "   c   a   -   p   u   b   -   8   8   6   3   7   1   8   7   5   2   0   4   9   7   3   9   "   ;   

       /   *       r   e   v   i   e   w   s   -   h   o   r       *   /   

       g   o   o   g   l   e   _   a   d   _   s   l   o   t       =       "   1   6   4   8   6   2   0   2   7   3   "   ;   

      g   o   o   g   l   e   _   a   d   _   w   i   d   t   h       =       7   2   8   ;   

      g   o   o   g   l   e   _   a   d   _   h   e   i   g   h   t       =       9   0   ;   

      /   /   -   -   >   

     <   /   s   c   r   i   p   t   >   

     <   s   c   r   i   p   t       t   y   p   e   =   "   t   e   x   t   /   j   a   v   a   s   c   r   i   p   t   "   

     s   r   c   =   "   h   t   t   p   :   /   /   p   a   g   e   a   d   2   .   g   o   o   g   l   e   s   y   n   d   i   c   a   t   i   o   n   .   c   o   m   /   p   a   g   e   a   d   /   s   h   o   w   _   a   d   s   .   j   s   "   >   

     <   /   s   c   r   i   p   t   >   

                           <   /   d   i   v   >   

                   <   /   t   d   >   

           <   /   t   r   >   

    <   /   t   a   b   l   e   >   

    <   t   a   b   l   e       w   i   d   t   h   =   "   9   6   %   "       b   o   r   d   e   r   =   "   0   "       c   e   l   l   s   p   a   c   i   n   g   =   "   0   "       c   e   l   l   p   a   d   d   i   n   g   =   "   0   "   >   

             <   t   r   >       

                     <   t   d       w   i   d   t   h   =   "   1   2   8   "       v   a   l   i   g   n   =   "   t   o   p   "       a   l   i   g   n   =   "   l   e   f   t   "   >       

                           <   t   a   b   l   e       b   o   r   d   e   r   =   "   0   "       c   e   l   l   p   a   d   d   i   n   g   =   "   0   "       c   e   l   l   s   p   a   c   i   n   g   =   "   0   "       w   i   d   t   h   =   "   1   1   9   "   >   

     <   /   t   r   >   

    <   /   t   a   b   l   e   >   

     <   /   b   o   d   y   >   

     <   /   h   t   m   l   >   

           </script></div></td></tr></table></body></html>

谢谢！！！！

4

3 回答 3

1

您可以将解析器指定为html.parser：

soup = BeautifulSoup(urllib2.urlopen(html).read(), 'html.parser')

或者您可以指定html5解析器：

soup = BeautifulSoup(urllib2.urlopen(html).read(), 'html5')

还没安装html5解析器？从命令行安装它：

sudo apt-get install python-html5lib

您也可以使用解析器，但您可能会看到多值属性的xml一些差异，例如：class="foo bar"

soup = BeautifulSoup(urllib2.urlopen(html).read(), 'xml')
于 2014-02-16T16:13:14.417 回答
0

我解决了它，但不知道确切的原因。我安装了 virtualenv 并在其中运行了我的程序。它工作得很好。

于 2012-12-27T06:31:43.743 回答
0

这可能是BeautifulSoup 没有正确读取文档的副本，即由BS 4.0.2 中的错误引起的。

该错误已在 4.0.3 中修复。您可能想检查的输出

>>> import bs4
>>> bs4.__version__

我怀疑你系统的 BeautifulSoup 是 4.0.2，而你的 virtualenv 是 4.0.3（或更高版本）。因此，如果您希望您的代码在您的系统上正常运行，请将 BeautifulSoup 升级到更高版本。

于 2013-08-27T11:31:52.270 回答