php curl請(qǐng)求信息和返回信息設(shè)置代碼實(shí)例
在用curl抓取網(wǎng)頁(yè)內(nèi)容的時(shí)候,經(jīng)常要知道,網(wǎng)頁(yè)返回的請(qǐng)求頭信息,和請(qǐng)求的相關(guān)信息,特別是在請(qǐng)求過(guò)程中存在重定向的時(shí)候獲取請(qǐng)求返回頭信息對(duì)分析請(qǐng)求內(nèi)容很有幫助
下面就是一個(gè)請(qǐng)求中存在重定向的例子,我們的目的是要獲取最終實(shí)際請(qǐng)求的url地址
$url='http://www.appchina.com/market/r/489267/com.appshare.android.ilisten.vapk?c=aplus.direct&uid=gAJ9cQEu1TlyZxsXN-aB4RaanvFL6t6Bj-vj0rIBs&p=aplus.detail&m=redirect'; $ch=curl_init(); curl_setopt($ch, CURLOPT_URL, $url); //curl_setopt($ch, CURLOPT_POST, 1); //curl_setopt($ch, CURLOPT_POSTFIELDS, $params); curl_setopt($ch, CURLOPT_HEADER, 1);//返回response頭部信息 curl_setopt($ch, CURLOPT_NOBODY, 1);//不返回response body內(nèi)容 //curl_setopt($ch, CURLOPT_MAXREDIRS, 1);//設(shè)置請(qǐng)求最多重定向的次數(shù) curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);//不直接輸出response curl_setopt($ch, CURLOPT_FOLLOWLOCATION,1);//如果返回的response 頭部中存在Location值,就會(huì)遞歸請(qǐng)求 $content=curl_exec($ch); $rinfo=curl_getinfo($ch); echo $content,"</br>"; echo "<hr>"; print_r($rinfo);
下面是輸出的結(jié)果
HTTP/1.1 200 OKServer: nginxDate: Sat, 22 Dec 2012 06:17:44 GMTContent-Type: application/vnd.android.package-archiveConnection: closeLast-Modified: Mon, 03 Dec 2012 16:00:00 GMTExpires: Tue, 03 Dec 2013 16:00:00 GMTCache-Control: max-age=31536000Content-Length: 2142149 Array( [url] => http://www.d.appchina.com/McDonald/r/489267/com.appshare.android.ilisten.vapk?c=aplus.direct&uid=gAJ9cQEu1TlyZxsXN-aB4RaanvFL6t6Bj-vj0rIBs&p=aplus.detail&m=redirect [content_type] => application/vnd.android.package-archive [http_code] => 200 [header_size] => 289 [request_size] => 196 [filetime] => -1 [ssl_verify_result] => 0 [redirect_count] => 0 [total_time] => 0.171621 [namelookup_time] => 0.135256 [connect_time] => 0.152913 [pretransfer_time] => 0.152916 [size_upload] => 0 [size_download] => 0 [speed_download] => 0 [speed_upload] => 0 [download_content_length] => 2142149 [upload_content_length] => 0 [starttransfer_time] => 0.171582 [redirect_time] => 0 [certinfo] => Array ( ))
可以看到,經(jīng)過(guò)遞歸請(qǐng)求后最終得到一個(gè)200的response,但是這中方式不能得到最后一次請(qǐng)求的url,也就是最終實(shí)際請(qǐng)求的url,要想得到這個(gè)url就需要遞歸的分析每次請(qǐng)求返回的response
下面是我寫的一個(gè)獲取最后一次請(qǐng)求url的遞歸函數(shù)
$url='http://www.appchina.com/market/r/489267/com.appshare.android.ilisten.vapk?c=aplus.direct&uid=gAJ9cQEu1TlyZxsXN-aB4RaanvFL6t6Bj-vj0rIBs&p=aplus.detail&m=redirect'; [php] view plaincopy $realUrl=getRedirectLocation($url); echo "</br>--->",$realUrl; function getRedirectLocation($url){ $realUrl=$url; echo $url,"</br>"; $ch=curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_HEADER, 1);curl_setopt($ch, CURLOPT_TIMEOUT, 3);//設(shè)置curl執(zhí)行時(shí)間不超過(guò)3秒 //curl_setopt($ch, CURLOPT_NOBODY, 1);//這行不能要,如果添上,那么在遇到302重定向的時(shí)候就會(huì)得不到真正的請(qǐng)求url curl_setopt($ch,CURLOPT_RETURNTRANSFER,1); $content=curl_exec($ch); //echo $content; $rinfo=curl_getinfo($ch); $matches=array(); if(preg_match('/Location:\s+?(.+?)\s+?/', $content,$matches)){ //echo $matches[1],"</br>"; unset($content); $realUrl=getRedirectLocation($matches[1]); } if(isset($content)){ unset($content); } return $realUrl; }
相關(guān)文章
PHP實(shí)現(xiàn)頁(yè)面靜態(tài)化的超簡(jiǎn)單方法
下面小編就為大家?guī)?lái)一篇PHP實(shí)現(xiàn)頁(yè)面靜態(tài)化的超簡(jiǎn)單方法。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2016-09-09php實(shí)現(xiàn)的百度搜索某地天氣的小偷代碼
這篇文章主要介紹了php實(shí)現(xiàn)的百度搜索某地天氣的小偷代碼,有關(guān)php顯示天氣預(yù)報(bào)信息的方法,需要的朋友可以參考下2014-04-04codeigniter框架The URI you submitted has disallowed characters
這篇文章主要介紹了codeigniter框架The URI you submitted has disallowed characters錯(cuò)誤解決方法,需要的朋友可以參考下2014-05-05PHP+Mysql+jQuery實(shí)現(xiàn)發(fā)布微博程序 php篇
這篇文章主要介紹了PHP+Mysql+jQuery實(shí)現(xiàn)發(fā)布微博程序,重要介紹后臺(tái)是如何處理前臺(tái)提交的數(shù)據(jù),并返回結(jié)果的,需要的朋友可以參考下2015-10-10laravel 解決路由除了根目錄其他都404的問(wèn)題
今天小編就為大家分享一篇laravel 解決路由除了根目錄其他都404的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-10-10