Warning: file_get_contents(/data/phpspider/zhask/data//catemap/8/http/4.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
如何获取所有HTTP对象_Http_Browser_Webkit_Scrapy_Wget - Fatal编程技术网

如何获取所有HTTP对象

如何获取所有HTTP对象,http,browser,webkit,scrapy,wget,Http,Browser,Webkit,Scrapy,Wget,大家好,问题是:我想获取网站的所有对象,不是浏览器中显示的对象,而是我们实际发出http请求的对象 例如,我想获取我发出http get请求的所有对象为什么您不知道您发出http get请求的对象是什么?我知道,但我想自动化此过程。就像我刚刚向google.com发出请求,它会自动保存我的浏览器将要请求的所有对象(如果我从浏览器访问google.com,也是这样)。不知何故,由于剪贴簿对数据的操作,我无法获取浏览器实际请求的所有对象。因此,我正在寻找与web浏览器行为相同但不更改数据的对象。您能

大家好,问题是:我想获取网站的所有对象,不是浏览器中显示的对象,而是我们实际发出http请求的对象
例如,我想获取我发出http get请求的所有对象

为什么您不知道您发出http get请求的对象是什么?我知道,但我想自动化此过程。就像我刚刚向google.com发出请求,它会自动保存我的浏览器将要请求的所有对象(如果我从浏览器访问google.com,也是这样)。不知何故,由于剪贴簿对数据的操作,我无法获取浏览器实际请求的所有对象。因此,我正在寻找与web浏览器行为相同但不更改数据的对象。您能否为您的场景提供一个完整的示例?(例如,如何提出请求,以及如何尝试(但未能)查询所需信息?)