php-如何获取此网站的带有curl的网页内容
如何获取此网站的带有curl的网页内容: 迪瓦。红外光谱 我想试着从一个有curl的网站上获取一个页面,但不起作用 我写了下面的代码,显示404页php-如何获取此网站的带有curl的网页内容,php,curl,php-curl,Php,Curl,Php Curl,如何获取此网站的带有curl的网页内容: 迪瓦。红外光谱 我想试着从一个有curl的网站上获取一个页面,但不起作用 我写了下面的代码,显示404页 function get_web_page( $url ) { $options = array( CURLOPT_RETURNTRANSFER => true, // return web page CURLOPT_HEADER => false, // don't
function get_web_page( $url )
{
$options = array(
CURLOPT_RETURNTRANSFER => true, // return web page
CURLOPT_HEADER => false, // don't return headers
CURLOPT_FOLLOWLOCATION => true, // follow redirects
CURLOPT_ENCODING => "", // handle all encodings
CURLOPT_USERAGENT => "spider", // who am i
CURLOPT_AUTOREFERER => true, // set referer on redirect
CURLOPT_CONNECTTIMEOUT => 120, // timeout on connect
CURLOPT_TIMEOUT => 120, // timeout on response
CURLOPT_MAXREDIRS => 10, // stop after 10 redirects
CURLOPT_SSL_VERIFYPEER => false // Disabled SSL Cert checks
);
$ch = curl_init( $url );
curl_setopt_array( $ch, $options );
$content = curl_exec( $ch );
$err = curl_errno( $ch );
$errmsg = curl_error( $ch );
$header = curl_getinfo( $ch );
curl_close( $ch );
$header['errno'] = $err;
$header['errmsg'] = $errmsg;
$header['content'] = $content;
return $header;
}
$link="https://divar.ir/";
$res =get_web_page($link);
echo $res['content'];
更改用户代理
CURLOPT_USERAGENT=>“Mozilla/5.0(Windows NT 6.1;WOW64;rv:53.0)Gecko/20100101 Firefox/53.0”您的代码在这里可以完美运行。也许你因为抓取网站而被阻止。不,这不起作用,我在localhost和几个ip中测试:@ceejayozdid你用浏览器打开这个网站吗?是的,divar.ir正确显示,但显示为curl page 404@Deadooshkafeed it all browser request headersIt也不起作用'CURLOPT_USERAGENT=>“Mozilla/5.0(Windows NT 6.1;WOW64;rv:53.0)Gecko/20100101 Firefox/53.0“`”-安全升级不安全请求:1如果不匹配:W/“fdf5-PbFQJsgYicO3dRkRzC8NHA”您需要密钥W/“fdf5-PbFQJsgYicO3dRkRzC8NHA”来获取卷发。请告诉我如何更改我的代码以正确运行@user3126867