Web scraping 我需要帮助网页抓取评论部分

Web scraping 我需要帮助网页抓取评论部分,web-scraping,Web Scraping,我目前正在做一个关于足球运动员的项目。我试图搜集一些公众对足球运动员的评论,以便进行情绪分析。然而,我似乎不能勉强评论。任何帮助都将不胜感激。这是我似乎做不到的评论部分。奇怪的是,我让它工作了,但后来它停止了,我似乎再也找不到评论了。我正在从以下网站中删除: 注释部分是动态加载的。您可以尝试使用驱动程序捕获它 try: comment_elements = driver.find_elements_by_tag_name('p') for comment in comment_e

我目前正在做一个关于足球运动员的项目。我试图搜集一些公众对足球运动员的评论,以便进行情绪分析。然而,我似乎不能勉强评论。任何帮助都将不胜感激。这是我似乎做不到的评论部分。奇怪的是,我让它工作了,但后来它停止了,我似乎再也找不到评论了。我正在从以下网站中删除:


注释部分是动态加载的。您可以尝试使用驱动程序捕获它

try:
    comment_elements = driver.find_elements_by_tag_name('p')
    for comment in comment_elements:
        comments.append(comment.text)
except:
    pass
print(Comments)

评论似乎包含在脚本中,而不是主页的一部分…感谢您的推荐。它可以工作,但偶尔会因错误而停止,即不规则的长度不同。这可能是4次迭代,有时是10次,等等。您指的是来自pandas dataframe的错误吗?ValueError:数组的长度必须相同#如有必要,请找出索引
try:
    comment_elements = driver.find_elements_by_tag_name('p')
    for comment in comment_elements:
        comments.append(comment.text)
except:
    pass
print(Comments)