Python 硒网纹织物

当我使用Selenium和scrapy来爬行dymanic JS开发的信息时，我使用了webdriver.PhantomJS。但是我在cmd窗口中找到了这样的调试信息

selenium.webdriver.remote.remote\u连接]调试：POST

---

将会有很多，它们会减慢我的爬行器的速度。我如何才能关闭它。我只想加快爬行器的速度。

这是selenium日志记录，日志记录本身不会减慢速度。启动和自动化真正的浏览器（甚至是无头的）的需要是减缓web抓取过程的原因

如果不希望看到信息和调试消息，请将日志记录级别更改为警告：

import logging

selenium_logger = logging.getLogger('selenium.webdriver.remote.remote_connection')
selenium_logger.setLevel(logging.WARNING)

---

将其放入Scrapy项目的

settings.py

。

这是selenium日志记录，日志记录本身不会减慢速度。启动和自动化真正的浏览器（甚至是无头的）的需要是减缓web抓取过程的原因

如果不希望看到信息和调试消息，请将日志记录级别更改为警告：

import logging

selenium_logger = logging.getLogger('selenium.webdriver.remote.remote_connection')
selenium_logger.setLevel(logging.WARNING)

---

把这个放到你的Scrapy项目的

settings.py

。

在我更改日志记录级别后，操作仍然有效。我也不能加速爬行器。用你的话说，在我更改日志记录级别后，操作无法关闭。操作仍然有效。我也不能加速爬行器。用你的话说，操作无法关闭？？？？？？？？