Python 什么';在scrapy中删除Discus评论计数的最佳方法是什么?

Python 什么';在scrapy中删除Discus评论计数的最佳方法是什么?,python,web-scraping,scrapy,Python,Web Scraping,Scrapy,我刚刚开始学习scrapy,对这种情况下的最佳实践很感兴趣。Scrapy设计用于使用CSS或XPath选择页面上的元素。discus的评论似乎加载在iFrame中,使它们更难刮取。我知道他们有一个API,但是有没有一种方法可以使用xpath/css或其他简单的选择器来删除它们 下面是一个示例帖子: 我试着只使用disqs comments count的xpath,但似乎不起作用 In [36]: sel.xpath('//*[@id="main-nav"]/nav/ul/li[1]/a/span

我刚刚开始学习scrapy,对这种情况下的最佳实践很感兴趣。Scrapy设计用于使用CSS或XPath选择页面上的元素。discus的评论似乎加载在iFrame中,使它们更难刮取。我知道他们有一个API,但是有没有一种方法可以使用xpath/css或其他简单的选择器来删除它们

下面是一个示例帖子:

我试着只使用disqs comments count的xpath,但似乎不起作用

In [36]: sel.xpath('//*[@id="main-nav"]/nav/ul/li[1]/a/span[1]').extract()
Out[36]: []

有没有其他方法可以得到计数?这里最好的策略是什么?

您有没有找到解决方案?