Python 什么';在scrapy中删除Discus评论计数的最佳方法是什么?
我刚刚开始学习scrapy,对这种情况下的最佳实践很感兴趣。Scrapy设计用于使用CSS或XPath选择页面上的元素。discus的评论似乎加载在iFrame中,使它们更难刮取。我知道他们有一个API,但是有没有一种方法可以使用xpath/css或其他简单的选择器来删除它们 下面是一个示例帖子: 我试着只使用disqs comments count的xpath,但似乎不起作用Python 什么';在scrapy中删除Discus评论计数的最佳方法是什么?,python,web-scraping,scrapy,Python,Web Scraping,Scrapy,我刚刚开始学习scrapy,对这种情况下的最佳实践很感兴趣。Scrapy设计用于使用CSS或XPath选择页面上的元素。discus的评论似乎加载在iFrame中,使它们更难刮取。我知道他们有一个API,但是有没有一种方法可以使用xpath/css或其他简单的选择器来删除它们 下面是一个示例帖子: 我试着只使用disqs comments count的xpath,但似乎不起作用 In [36]: sel.xpath('//*[@id="main-nav"]/nav/ul/li[1]/a/span
In [36]: sel.xpath('//*[@id="main-nav"]/nav/ul/li[1]/a/span[1]').extract()
Out[36]: []
有没有其他方法可以得到计数?这里最好的策略是什么?您有没有找到解决方案?