精通Python網(wǎng)絡爬蟲這是一本實戰(zhàn)性的網(wǎng)絡爬蟲秘笈，不僅講解了如何編寫爬蟲，而且還講解了流行的網(wǎng)絡爬蟲的使用。

全書分為4個部分：第壹部分對網(wǎng)絡爬蟲做了概要性的介紹，主要介紹了網(wǎng)絡爬蟲的常識和所涉及的技術概覽；第二部分是本書的重點之一，詳細講解了網(wǎng)絡爬蟲的核心技術，包括網(wǎng)絡爬蟲的實現(xiàn)原理與實現(xiàn)技術、Urllib庫和URLError庫的異常處理、正則表達式與Cookie的使用、Fiddler的使用、爬蟲的瀏覽器偽裝技術、爬蟲的定向抓取技術等；第三部分講解了流行的爬蟲框架Scrapy的使用、架構(gòu)和高級應用，是目前關于Scrapy詳細的講解；第四部分是3個實戰(zhàn)案例，講解了博客爬蟲、圖片爬蟲和模擬登陸爬蟲的編寫方法。

本書從技術、工具與實戰(zhàn)3個維度講解了Python網(wǎng)絡爬蟲：

技術維度：詳細講解了Python網(wǎng)絡爬蟲實現(xiàn)的核心技術，包括網(wǎng)絡爬蟲的工作原理、如何用urllib庫編寫網(wǎng)絡爬蟲、爬蟲的異常處理、正則表達式、爬蟲中Cookie的使用、爬蟲的瀏覽器偽裝技術、定向爬取技術、反爬蟲技術，以及如何自己動手編寫網(wǎng)絡爬蟲；
工具維度：以流行的Python網(wǎng)絡爬蟲框架Scrapy為對象，詳細講解了Scrapy的功能使用、高級技巧、架構(gòu)設計、實現(xiàn)原理，以及如何通過Scrapy來更便捷、高效地編寫網(wǎng)絡爬蟲；
實戰(zhàn)維度：以實戰(zhàn)為導向，是本書的主旨，除了完全通過手動編程實現(xiàn)網(wǎng)絡爬蟲和通過Scrapy框架實現(xiàn)網(wǎng)絡爬蟲的實戰(zhàn)案例以外，本書還有博客爬取、圖片爬取、模擬登錄等多個綜合性的網(wǎng)絡爬蟲實踐案例。

作者在Python領域有非常深厚的積累，不僅精通Python網(wǎng)絡爬蟲，在Python機器學習、Python數(shù)據(jù)分析與挖掘、Python Web開發(fā)等多個領域都有豐富的實戰(zhàn)經(jīng)驗。
 

目錄

第一篇　理論基礎篇
第1章　什么是網(wǎng)絡爬蟲 3
第2章　網(wǎng)絡爬蟲技能總覽 9
第二篇　核心技術篇
第3章　網(wǎng)絡爬蟲實現(xiàn)原理與實現(xiàn)技術 15
第4章　Urllib庫與URLError異常處理 29
第5章　正則表達式與Cookie的使用 52
第6章　手寫Python爬蟲 73
第7章　學會使用Fiddler 99
第8章　爬蟲的瀏覽器偽裝技術 114
第9章　爬蟲的定向爬取技術 122
第三篇　框架實現(xiàn)篇
第10章　了解Python爬蟲框架 133
第11章　爬蟲利器——Scrapy安裝與配置 141
第12章　開啟Scrapy爬蟲項目之旅 162
第13章　Scrapy核心架構(gòu) 214
第14章　Scrapy中文輸出與存儲 220
第15章　編寫自動爬取網(wǎng)頁的爬蟲 231
第16章　CrawlSpider 243
第17章　Scrapy高級應用 250
第四篇　項目實戰(zhàn)篇
第18章　博客類爬蟲項目 263
第19章　圖片類爬蟲項目 276
第20章　模擬登錄爬蟲項目 283