Python 使用scrapy刮取动态数据

Python 使用scrapy刮取动态数据,python,selenium,web-scraping,scrapy,scrapy-splash,Python,Selenium,Web Scraping,Scrapy,Scrapy Splash,我想使用scrapy和其他数据从纳斯达克网站上刮取股票期权链 纳斯达克最近更新了他们的网站。是我正在谈论的url 数据不是用普通的spider加载的,而是在scrapy shell中加载的。从scrapy文档中,我需要使用scrapy splash或scrapy selenium 在投入时间之前,我想知道哪一个是适合这份工作的工具。还是有其他建议 谢谢 对于该任务,您不需要硒或飞溅。相反,您可以在chrome开发者工具中查看网络选项卡 站点发出额外请求以从以下端点获取数据: 干杯没有想到这一点

我想使用scrapy和其他数据从纳斯达克网站上刮取股票期权链

纳斯达克最近更新了他们的网站。是我正在谈论的url

数据不是用普通的spider加载的,而是在scrapy shell中加载的。从scrapy文档中,我需要使用scrapy splash或scrapy selenium

在投入时间之前,我想知道哪一个是适合这份工作的工具。还是有其他建议


谢谢

对于该任务,您不需要硒或飞溅。相反,您可以在chrome开发者工具中查看网络选项卡

站点发出额外请求以从以下端点获取数据:


干杯

没有想到这一点。谢谢!