PHP curl 抓取AJAX異步內(nèi)容示例
其實(shí)抓ajax異步內(nèi)容的頁(yè)面和抓普通的頁(yè)面區(qū)別不大。ajax只不過(guò)是做了一次異步的http請(qǐng)求,只要使用firebug類似的工具,找到請(qǐng)求的后端服務(wù)url和傳值的參數(shù),然后對(duì)該url傳遞參數(shù)進(jìn)行抓取即可。
利用Firebug的網(wǎng)絡(luò)工具

如果抓去的是頁(yè)面,則內(nèi)容中沒(méi)有顯示的數(shù)據(jù),是一堆JS代碼。

Code
$cookie_file=tempnam('./temp','cookie');
$ch = curl_init();
$url1 = "http://www.cdut.edu.cn/default.html";
curl_setopt($ch,CURLOPT_URL,$url1);
curl_setopt($ch,CURLOPT_HTTP_VERSION,CURL_HTTP_VERSION_1_1);
curl_setopt($ch,CURLOPT_HEADER,0);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1);
curl_setopt($ch, CURLOPT_ENCODING ,'gzip'); //加入gzip解析
//設(shè)置連接結(jié)束后保存cookie信息的文件
curl_setopt($ch,CURLOPT_COOKIEJAR,$cookie_file);
$content=curl_exec($ch);
curl_close($ch);
$ch3 = curl_init();
$url3 = "http://www.cdut.edu.cn/xww/dwr/call/plaincall/portalAjax.getNewsXml.dwr";
$curlPost = "callCount=1&page=/xww/type/1000020118.html&httpSessionId=12A9B726E6A2D4D3B09DE7952B2F282C&scriptSessionId=295315B4B4141B09DA888D3A3ADB8FAA658&c0-scriptName=portalAjax&c0-methodName=getNewsXml&c0-id=0&c0-param0=string:10000201&c0-param1=string:1000020118&c0-param2=string:news_&c0-param3=number:5969&c0-param4=number:1&c0-param5=null:null&c0-param6=null:null&batchId=0";
curl_setopt($ch3,CURLOPT_URL,$url3);
curl_setopt($ch3,CURLOPT_POST,1);
curl_setopt($ch3,CURLOPT_POSTFIELDS,$curlPost);
//設(shè)置連接結(jié)束后保存cookie信息的文件
curl_setopt($ch3,CURLOPT_COOKIEFILE,$cookie_file);
$content1=curl_exec($ch3);
curl_close($ch3);
- PHP框架Laravel中實(shí)現(xiàn)supervisor執(zhí)行異步進(jìn)程的方法
- 4種PHP異步執(zhí)行的常用方式
- PHP ajax 異步執(zhí)行不等待執(zhí)行結(jié)果的處理方法
- PHP 異步執(zhí)行方法,模擬多線程的應(yīng)用分析
- 基于PHP異步執(zhí)行的常用方式詳解
- 深入PHP異步執(zhí)行的詳解
- 實(shí)現(xiàn)PHP多線程異步請(qǐng)求的3種方法
- php異步多線程swoole用法實(shí)例
- 利用ThinkPHP內(nèi)置的ThinkAjax實(shí)現(xiàn)異步傳輸技術(shù)的實(shí)現(xiàn)方法
- PHP的Laravel框架中使用消息隊(duì)列queue及異步隊(duì)列的方法
- PHP編程實(shí)現(xiàn)腳本異步執(zhí)行的方法
相關(guān)文章
PHP 請(qǐng)求上下文相關(guān)總結(jié)
這篇文章主要介紹了PHP 請(qǐng)求上下文的相關(guān)資料,幫助大家更好的理解和學(xué)習(xí)使用PHP,感興趣的朋友可以了解下2021-04-04
PHP設(shè)計(jì)模式之 策略模式Strategy詳解【對(duì)象行為型】
這篇文章主要介紹了PHP設(shè)計(jì)模式之 策略模式Strategy,結(jié)合實(shí)例形式詳細(xì)分析了PHP基于對(duì)象行為型的策略模式Strategy具體原理、實(shí)現(xiàn)技巧與相關(guān)操作注意事項(xiàng),需要的朋友可以參考下2020-05-05
PHP日期時(shí)間函數(shù)的高級(jí)應(yīng)用技巧
PHP的日期時(shí)間函數(shù)date()中介紹了PHP日期時(shí)間函數(shù)的簡(jiǎn)單用法,這類將介紹更多的函數(shù)來(lái)豐富我們的應(yīng)用。2009-05-05
實(shí)例探索PHP只讀屬性改變游戲規(guī)則的特性
這篇文章主要為大家介紹了PHP只讀屬性改變游戲規(guī)則的特性實(shí)例探索,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2024-01-01
PHP 動(dòng)態(tài)隨機(jī)生成驗(yàn)證碼類代碼
這個(gè)利用PHP動(dòng)態(tài)隨機(jī)生成驗(yàn)證碼的類是在LAMP的書(shū)上看到的。感覺(jué)寫(xiě)的很好就收藏了下來(lái)。2010-04-04
php實(shí)現(xiàn)通過(guò)stomp協(xié)議連接ActiveMQ操作示例
這篇文章主要介紹了php實(shí)現(xiàn)通過(guò)stomp協(xié)議連接ActiveMQ操作,結(jié)合實(shí)例形式分析了stomp擴(kuò)展安裝及使用stomp擴(kuò)展連接ActiveMQ具體操作技巧,需要的朋友可以參考下2020-02-02
php中preg_replace正則替換用法分析【一次替換多個(gè)值】
這篇文章主要介紹了php中preg_replace正則替換用法,結(jié)合實(shí)例形式對(duì)比分析了preg_replace一次替換多個(gè)值的具體使用技巧,需要的朋友可以參考下2017-01-01
php使用遞歸函數(shù)實(shí)現(xiàn)數(shù)字累加的方法
這篇文章主要介紹了php使用遞歸函數(shù)實(shí)現(xiàn)數(shù)字累加的方法,涉及php遞歸操作的技巧,需要的朋友可以參考下2015-03-03

