解析file_get_contents模仿瀏覽器頭(user_agent)獲取數(shù)據(jù)

更新時間：2013年06月27日 16:18:20 作者：

本篇文章是對file_get_contents模仿瀏覽器頭(user_agent)獲取數(shù)據(jù)進(jìn)行了詳細(xì)的分析介紹，需要的朋友參考下

什么是user agent
User Agent中文名為用戶代理，簡稱 UA，它是一個特殊字符串頭，使得服務(wù)器能夠識別客戶使用的操作系統(tǒng)及版本、CPU 類型、瀏覽器及版本、瀏覽器渲染引擎、瀏覽器語言、瀏覽器插件等。
網(wǎng)站可以通過判斷不同UA來呈現(xiàn)不同的網(wǎng)站，例如手機(jī)訪問和PC訪問顯示不同的頁面。
PHP在用file_get_contents函數(shù)采集網(wǎng)站時，有時會明明用瀏覽器可以看，但就是采不到任何內(nèi)容。
這很有可能是服務(wù)器上做了設(shè)置，根據(jù) User_agent判斷是否為正常的瀏覽器請求，因為默認(rèn)PHP的file_get_contents函數(shù)是不發(fā)送ua的。
如果要采集這樣的網(wǎng)站，我們就必須要讓PHP模擬瀏覽器發(fā)送UA，欺騙網(wǎng)站返回正常內(nèi)容。

實現(xiàn)如下：
ini_set('user_agent','Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; 4399Box.560; .NET4.0C; .NET4.0E)');
這是模擬IE8環(huán)境下的UA，當(dāng)然你也可以換成其他的。比如中火狐
也可以這樣讀取：

復(fù)制代碼代碼如下:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'header'=>"Host: zh.wikipedia.org\r\n" . 
              "Accept-language: zh-cn\r\n" . 
              "User-Agent: Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; 4399Box.560; .NET4.0C; .NET4.0E)" .
              "Accept: *//*"
)
); 

您可能感興趣的文章:

相關(guān)文章

PHP針對中英文混合字符串長度判斷及截取方法示例
這篇文章主要介紹了PHP針對中英文混合字符串長度判斷及截取方法,結(jié)合實例形式分析了php中英文字符串的遍歷、轉(zhuǎn)換、截取、計算等相關(guān)操作技巧,需要的朋友可以參考下
2017-03-03
php實現(xiàn)過濾字符串中的中文和數(shù)字實例
這篇文章主要介紹了php實現(xiàn)過濾字符串中的中文和數(shù)字的方法,實例分析了php操作中文和數(shù)字匹配的相關(guān)技巧,具有一定參考借鑒價值,需要的朋友可以參考下
2015-07-07
php中使用Imagick實現(xiàn)圖像直方圖的實現(xiàn)代碼
玩過單反相機(jī)的人應(yīng)該都知道圖像直方圖（Image Histogram），簡單點說，它通過計算每個色階在總像素中所占的比例來反映圖像的曝光情況。
2011-08-08
解析php中獲取系統(tǒng)信息的方法
本篇文章是對php中獲取系統(tǒng)信息的方法進(jìn)行了詳細(xì)的分析介紹，需要的朋友參考下
2013-06-06
windows平臺中配置nginx+php環(huán)境
相對于linux來說，windows配置web環(huán)境不管是一鍵安裝包還是獨立配置簡單多了，這次是講以NGINX作為web的本地的測試環(huán)境。
2015-12-12
PHP實現(xiàn)的折半查詢算法示例
這篇文章主要介紹了PHP實現(xiàn)的折半查詢算法,結(jié)合完整實例形式分析了php使用遞歸與非遞歸實現(xiàn)折半查詢的算法操作步驟與使用方法,需要的朋友可以參考下
2017-10-10
PHP實現(xiàn)打包下載文件的方法示例
這篇文章主要介紹了PHP實現(xiàn)打包下載文件的方法,涉及php基于curl的文件獲取、遍歷、zip壓縮及下載等相關(guān)操作技巧,需要的朋友可以參考下
2017-10-10
php設(shè)計模式 Adapter(適配器模式)
將一個類的接口轉(zhuǎn)換成客戶希望的另外一個接口,使用原本不兼容的而不能在一起工作的那些類可以在一起工作
2011-06-06
PHP中session跨子域的三種實現(xiàn)方法
做項目的時候跨域問題在cooike及session中我們經(jīng)常會使用到了，不過php對于子域處理是比較簡單的了，小編整理了三個解決方案，下面一起來看看。
2016-07-07
PHP CURL post數(shù)據(jù)報錯 failed creating formpost data
我們有時候用curl上傳文件遇到failed creating formpost data的錯誤，那具體是如何產(chǎn)生，又如何進(jìn)行處理解決呢，下面我們就來探討下
2016-10-10