Web scraping 吃披头士汤

Web scraping 吃披头士汤,web-scraping,beautifulsoup,Web Scraping,Beautifulsoup,我试图从www.chemspider.com网站上收集分子的“微笑”代码。 例如,我想用关键字“过氧化物”搜索ChemSpider数据库 它返回一个结果表和子页面 正如你们看到的,上面有链接的每个子页面都包含了分子的数据。 我从BeautifulSoup模块开始,但我不知道如何从那里移动,例如,如何访问表的“2”页? 有时这些结果会折叠起来,只显示表中每一行的标题。 提前感谢。考虑使用他们的“谢谢”来发表评论。我确实这么做了,但他们的API不允许部分搜索。请分享你当前的代码。@dundaryi

我试图从www.chemspider.com网站上收集分子的“微笑”代码。 例如,我想用关键字“过氧化物”搜索ChemSpider数据库 它返回一个结果表和子页面

正如你们看到的,上面有链接的每个子页面都包含了分子的数据。 我从BeautifulSoup模块开始,但我不知道如何从那里移动,例如,如何访问表的“2”页? 有时这些结果会折叠起来,只显示表中每一行的标题。
提前感谢。

考虑使用他们的“谢谢”来发表评论。我确实这么做了,但他们的API不允许部分搜索。请分享你当前的代码。@dundaryilmaz我看过这个网站。您可能需要selenium才能使web抓取正常工作。Selenium可以逐页单击。