《精通Scrapy網(wǎng)絡(luò)爬蟲》深入系統(tǒng)地介紹了Python流行框架Scrapy的相關(guān)技術(shù)及使用技巧?！毒⊿crapy網(wǎng)絡(luò)爬蟲》共14章，從邏輯上可分為基礎(chǔ)篇和高級篇兩部分，基礎(chǔ)篇重點介紹Scrapy的核心元素，如spider、selector、item、link等；高級篇講解爬蟲的高級話題，如登錄認證、文件下載、執(zhí)行JavaScript、動態(tài)網(wǎng)頁爬取、使用HTTP代理、分布式爬蟲的編寫等，并配合項目案例講解，包括供練習(xí)使用的網(wǎng)站，以及京東、知乎、豆瓣、360爬蟲案例等。

《精通Scrapy網(wǎng)絡(luò)爬蟲》案例豐富，注重實踐，代碼注釋詳盡，適合有一定Python語言基礎(chǔ)，想學(xué)習(xí)編寫復(fù)雜網(wǎng)絡(luò)爬蟲的讀者使用。

目錄

第1章 初識Scrapy 1
第2章 編寫Spider 12
第3章 使用Selector提取數(shù)據(jù) 23
第4章 使用Item封裝數(shù)據(jù) 41
第5章 使用Item Pipeline處理數(shù)據(jù) 48
第6章 使用LinkExtractor提取鏈接 58
第7章 使用Exporter導(dǎo)出數(shù)據(jù) 66
第8章 項目練習(xí) 75
第9章 下載文件和圖片 89
第10章 模擬登錄 110
第11章 爬取動態(tài)頁面 136
第12章 存入數(shù)據(jù)庫 155
第13章 使用HTTP代理 174
第14章 分布式爬取 199