scrapy - 如何通过scrapy获取'img' src属性？

Question

我想使用scrapy来获取img的链接，所以我在scrapy的爬虫中编写了下面的程序：

hxs.select('//dl[@class="clearfix"]//img/@src/text()').extract()

但是，它无论如何都不起作用。有什么问题吗 ？

Answer 1

如果您使用 CSS 选择器而不是 XPath，则语法为::attr(src)

response.css('.product-list img::attr(src)').extract() # extract_first() to get only one

Answer 2

text()是元素的文本。只需使用@src：

hxs.select('//dl[@class="clearfix"]//img/@src').extract()