在python2.7中,为什么urllib2不能读取整个页面

在python2.7中,为什么urllib2不能读取整个页面,python,urllib2,Python,Urllib2,我试图获取一个用户的追随者姓名 我发现程序只读取网格中的前12个用户,而完全忽略其余用户: 我检查了该链接,追随者只在你向下滚动页面时加载。。。您需要使用urllib以外的其他工具来刮取所有数据。也许可以试试这个:所有的HTML都在加载时可见吗?或者其中的一部分是通过用户输入动态连接到DOM的?请注意,你永远无法用三行代码刮取像Pinterest、Facebook、Twitter或Google这样的网站(而且你一到那里就会被禁止)。相反,请看一下它的功能。

我试图获取一个用户的追随者姓名

我发现程序只读取网格中的前12个用户,而完全忽略其余用户:


我检查了该链接,追随者只在你向下滚动页面时加载。。。您需要使用urllib以外的其他工具来刮取所有数据。也许可以试试这个:

所有的HTML都在加载时可见吗?或者其中的一部分是通过用户输入动态连接到DOM的?请注意,你永远无法用三行代码刮取像Pinterest、Facebook、Twitter或Google这样的网站(而且你一到那里就会被禁止)。相反,请看一下它的功能。