如何从需要“链接”的页面获取HREF链接;“更多”;在Python中查看的按钮?

如何从需要“链接”的页面获取HREF链接;“更多”;在Python中查看的按钮?,python,python-3.x,beautifulsoup,Python,Python 3.x,Beautifulsoup,所以我试图抓取这个网站,但我似乎无法获得完整的内容 我现在的代码是 import urllib import lxml.html connection = urllib.urlopen('https://play.acast.com/s/den-politiske-situasjonen') dom = lxml.html.fromstring(connection.read()) for link in dom.xpath('//a/@href'): # select the url i

所以我试图抓取这个网站,但我似乎无法获得完整的内容

我现在的代码是

import urllib
import lxml.html
connection = urllib.urlopen('https://play.acast.com/s/den-politiske-situasjonen')

dom =  lxml.html.fromstring(connection.read())

for link in dom.xpath('//a/@href'): # select the url in href for all a tags(links)
    print(link)
我正在尝试获取所有插曲链接的URL

目前我的输出是

/
/s/den-politiske-situasjonen/bullshit-taktikkellerekteengasjement-
/s/den-politiske-situasjonen/nyevinerihoyreogbrysomrapport-acast662f5dfa
/s/den-politiske-situasjonen/ernaleverfarlig-
/s/den-politiske-situasjonen/sushi-ernaersliten-na
/s/den-politiske-situasjonen/abortogtegnell
/s/den-politiske-situasjonen/hvor-vanlig-erstore-egentlig-
/s/den-politiske-situasjonen/koronakommisjonensdomovererna-co
/s/den-politiske-situasjonen/ernasvagegjenapningsplan
/s/den-politiske-situasjonen/vaksinenasjonalismeogfossilbil-hat
/s/den-politiske-situasjonen/sushipageiloognorskkoronaledelse
/
https://www.facebook.com/acaststories
https://www.instagram.com/acastforthestories/
https://www.linkedin.com/company/acast-ab
https://twitter.com/acast
https://www.acast.com/cookies
https://www.acast.com/cookies

您可以尝试
selenium
@GiorgiImerlishvili是否有其他方法不使用webdrivers?我投票结束此问题,因为这是同一用户提出的同一问题的副本-@DSMKSwab两次提出同一问题不会让您更快地得到答案。