thinkphp 抓取網(wǎng)站的內(nèi)容并且保存到本地的實例詳解

更新時間：2017年08月25日 11:28:37 投稿：lqh

這篇文章主要介紹了thinkphp 抓取網(wǎng)站的內(nèi)容并且保存到本地的實例詳解的相關(guān)資料,需要的朋友可以參考下

thinkphp 抓取網(wǎng)站的內(nèi)容并且保存到本地的實例詳解

我需要寫這么一個例子，到電子課本網(wǎng)下載一本電子書。

電子課本網(wǎng)的電子書，是把書的每一頁當成一個圖片，然后一本書就是有很多張圖片，我需要批量的進行下載圖片操作。

下面是代碼部分：

 public function download() {
    $http = new \Org\Net\Http();
    $url_pref = "http://www.dzkbw.com/books/rjb/dili/xc7s/";
    $localUrl = "Public/bookcover/";
    $reg="|showImg\('(.+)'\);|";
    $i=1;
    
    do {
      $filename = substr("000".$i,-3).".htm";
      $ch = curl_init();
      curl_setopt($ch, CURLOPT_URL, $url_pref.$filename);
      curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
      curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 10);
      curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
      $html = curl_exec($ch);
      curl_close($ch);
      
      $result = preg_match_all($reg,$html,$out, PREG_PATTERN_ORDER);
      if($result==1) {
        $picUrl = $out[1][0];
        $picFilename = substr("000".$i,-3).".jpg";
        $http->curlDownload($picUrl, $localUrl.$picFilename);
      }
      $i = $i+1;
    } while ($result==1);

    echo "下載完成";
  }

我這里是以人教版地理七年級地理上冊為例子 http://www.dzkbw.com/books/rjb/dili/xc7s/001.htm

網(wǎng)頁是從001.htm開始，然后數(shù)字一直加

每個網(wǎng)頁里面都有一張圖，就是對應(yīng)課本的內(nèi)容，以圖片的形式展示課本內(nèi)容

我的代碼是做了一個循環(huán)，從第一頁開始抓，一直抓到找不到網(wǎng)頁里的圖片為止

抓到網(wǎng)頁的內(nèi)容后，把網(wǎng)頁里面的圖片抓取到本地服務(wù)器

抓取后的實際效果：

以上就是thinkphp 抓取網(wǎng)站的內(nèi)容并且保存到本地的實例詳解，如有疑問請留言或者到本站社區(qū)交流討論，感謝閱讀，希望能幫助到大家，謝謝大家對本站的支持！

您可能感興趣的文章:

相關(guān)文章

關(guān)于PHP中Session文件過多的問題及session文件保存位置
PHP的默認機制：每一次php請求，會有1/100的概率（默認值）觸發(fā)“session回收”。接下來通過本文給大家介紹關(guān)于PHP中Session文件過多的問題及session文件保存位置，需要的朋友參考下
2016-03-03
PHP Pipeline 實現(xiàn)中間件的示例代碼
這篇文章主要介紹了PHP Pipeline 實現(xiàn)中間件的示例代碼，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧
2020-04-04
完美的2個php檢測字符串是否是utf-8編碼函數(shù)分享
這篇文章主要介紹了完美的2個php檢測字符串是否是utf-8編碼函數(shù)分享,一個比較強大、一個比較簡潔,需要的朋友可以參考下
2014-07-07
php導(dǎo)入導(dǎo)出excel實例
使用PHPExcelphp導(dǎo)入excel、導(dǎo)出excel，支持office2007格式，同時兼容2003，具體看例子學習吧！
2013-10-10
PHP+MySQL 制作簡單的留言本
程序安裝界面用于創(chuàng)建數(shù)據(jù)庫、表，以及動態(tài)生成config.php文件.
2009-11-11
ThinkPHP文件上傳實例教程
這篇文章主要介紹了ThinkPHP文件上傳實現(xiàn)方法,是ThinkPHP程序開發(fā)中非常常見的一個技巧,需要的朋友可以參考下
2014-08-08
Zend Framework入門教程之Zend_Session會話操作詳解
這篇文章主要介紹了Zend Framework入門教程之Zend_Session會話操作,結(jié)合實例形式詳細分析了Zend_Session會話操作的具體使用技巧,需要的朋友可以參考下
2016-12-12
php結(jié)合ajax實現(xiàn)手機發(fā)紅包的案例
發(fā)紅包功能，當我們輸入紅包數(shù)量和總金額后，PHP會根據(jù)這兩個值進行隨機分配每個金額，保證每個人都能領(lǐng)取到一個紅包，每個紅包金額不等，就是要求紅包金額要有差異，所有紅包金額總額應(yīng)該等于總金額。
2016-10-10
常用PHP框架功能對照表
這篇文章主要介紹了常用PHP框架功能對照表,對于選擇PHP框架進行開發(fā)時具有一定的參考價值,需要的朋友可以參考下
2014-10-10
php數(shù)組合并的二種方法
這篇文章主要介紹了php數(shù)組合并的二種方法,同時講了用加號和用array_merge合并數(shù)組的區(qū)別,需要的朋友可以參考下
2014-03-03