Python 通过链接抓取网页。

我试图刮一个网页，你必须使用一个特定的链接访问该网站。问题是这个链接会将您带到主页，并且网站上的每个产品都有一个唯一的url。我的问题是，为了抓取和下载PDF，我将如何访问这些产品页面

我习惯于直接循环通过URL，但从来没有通过一个链接访问其他URL。任何帮助都会很好

---

我正在使用Python和bs4

如果url中的url标记是固定的，并且总是在它们的div中找到url。因此，您可以打开第一个URL，然后提取第二个URL，打开它，然后提取第三个URL，依此类推…@Chiheb Nexus那么它是否只是一个for循环，将您指向第一个链接，然后是另一个for循环将您指向产品链接？此外，我将不得不在每个产品之前运行第一个链接，因为它不会让您在没有凭据的情况下首先访问它。