Warning: file_get_contents(/data/phpspider/zhask/data//catemap/8/python-3.x/15.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
使用python和bs4抓取后的不同数据_Python_Python 3.x_Web Scraping_Beautifulsoup_Amazon - Fatal编程技术网

使用python和bs4抓取后的不同数据

使用python和bs4抓取后的不同数据,python,python-3.x,web-scraping,beautifulsoup,amazon,Python,Python 3.x,Web Scraping,Beautifulsoup,Amazon,我想知道亚马逊上的评论数量。 然而,当我获取数据时,它与网站上的数据不同。 (131是从亚马逊抓取的,655是从亚马逊抓取的) 我附上了页面截图和剪贴后的截图 在浏览器中点击链接url3后,我到达了一个页面,其中评论的数量是131,所以这是你可以得到的评论数量,所以也许可以查看url3。你能分享给你655条评论的链接吗? import bs4 import requests import time url3 = "https://www.amazon.it/dp/B076S8NSCD"

我想知道亚马逊上的评论数量。 然而,当我获取数据时,它与网站上的数据不同。 (131是从亚马逊抓取的,655是从亚马逊抓取的) 我附上了页面截图和剪贴后的截图


在浏览器中点击链接
url3
后,我到达了一个页面,其中评论的数量是131,所以这是你可以得到的评论数量,所以也许可以查看url3。你能分享给你655条评论的链接吗?
import bs4
import requests
import time


url3 = "https://www.amazon.it/dp/B076S8NSCD"

headers = {"User-Agent" : 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/13.0.5 Safari/605.1.15'}

res = requests.get(url3, headers = headers)

soup = bs4.BeautifulSoup(res.text, "html.parser")


reviews = soup.find(id = "acrCustomerReviewText").get_text()
print(reviews)