Python 使用BeautifulSoup和Selenium创建多个网站

Python 使用BeautifulSoup和Selenium创建多个网站,python,selenium,web-scraping,beautifulsoup,web-crawler,Python,Selenium,Web Scraping,Beautifulsoup,Web Crawler,我正试图用BeautifulSoup和Selenium来抓取多个电子商务网站 我使用该网站中搜索框的CSS选择器搜索一个单词,然后尝试使用BeautifulSoup刮取相关数据。但a无法实现一个代码来刮取所有这些网站 我可以从每个网站获取我需要的数据,但我不能用一个代码为所有网站都这样做 我的目标是从多个电子商务网站获取一个代码和数据 有人能帮我吗?当每页的数据和页面代码不同时,我认为您需要为每页创建单独的刮板。当页数增加时,无法为每页创建单独的刮板。

我正试图用BeautifulSoup和Selenium来抓取多个电子商务网站

我使用该网站中搜索框的CSS选择器搜索一个单词,然后尝试使用BeautifulSoup刮取相关数据。但a无法实现一个代码来刮取所有这些网站

我可以从每个网站获取我需要的数据,但我不能用一个代码为所有网站都这样做

我的目标是从多个电子商务网站获取一个代码和数据


有人能帮我吗?

当每页的数据和页面代码不同时,我认为您需要为每页创建单独的刮板。当页数增加时,无法为每页创建单独的刮板。