Python 2.7 刮擦爬行问题
我试图从维基百科上爬出来,但结果没有返回任何东西。 我试着在IPython控制台中运行一个简单的查询来检查一个值,但它仍然没有返回任何值 我试过这个:Python 2.7 刮擦爬行问题,python-2.7,xpath,web-crawler,scrapy,ipython,Python 2.7,Xpath,Web Crawler,Scrapy,Ipython,我试图从维基百科上爬出来,但结果没有返回任何东西。 我试着在IPython控制台中运行一个简单的查询来检查一个值,但它仍然没有返回任何值 我试过这个: sel.xpath('//div[@id=“mw content text”]/table/tbody/tr[1]/td[1]/text()).extract()这将是一个猜测,但有根据tbody是由浏览器插入的内容,也是您在浏览器开发人员工具中看到的内容。但是,Scrapy不是浏览器-从xpath表达式中删除tbody: 非常感谢你!它正在工作
sel.xpath('//div[@id=“mw content text”]/table/tbody/tr[1]/td[1]/text()).extract()
这将是一个猜测,但有根据tbody
是由浏览器插入的内容,也是您在浏览器开发人员工具中看到的内容。但是,Scrapy不是浏览器-从xpath表达式中删除tbody
:
非常感谢你!它正在工作!我会记住这个有根据的猜测!再次感谢!:)
sel.xpath('//div[@id="mw-content-text"]/table/tr[1]/td[1]/text()').extract()