Xpath 刮去连接后加载的模板

Xpath 刮去连接后加载的模板,xpath,scrapy,Xpath,Scrapy,我想从一个网站,可能从其他网站刮-TripAdvisor。 但我认为信息只有在我连接到网站后才会加载。例如:我想知道这家酒店最优惠价格的名称和价格。。。 到目前为止,它的“otels”售价为238美元,如果我搜索('//span[@class=“providerLogo”]'),结果是一片空白 有人遇到过这种情况吗?您想搜集哪些确切信息?如果站点通过Javascript动态加载数据,您可能会成功地直接抓取相同的数据URL。我想抓取顶级提供商的名称,以便找到整个站点中最便宜的提供商。

我想从一个网站,可能从其他网站刮-TripAdvisor。 但我认为信息只有在我连接到网站后才会加载。例如:我想知道这家酒店最优惠价格的名称和价格。。。

到目前为止,它的“otels”售价为238美元,如果我搜索('//span[@class=“providerLogo”]'),结果是一片空白


有人遇到过这种情况吗?

您想搜集哪些确切信息?如果站点通过Javascript动态加载数据,您可能会成功地直接抓取相同的数据URL。我想抓取顶级提供商的名称,以便找到整个站点中最便宜的提供商。