詳解Python靜態(tài)網(wǎng)頁(yè)爬取獲取高清壁紙
前言
在設(shè)計(jì)爬蟲(chóng)項(xiàng)目的時(shí)候,首先要在腦內(nèi)明確人工瀏覽頁(yè)面獲得圖片時(shí)的步驟
一般地,我們?nèi)ゾW(wǎng)上批量打開(kāi)壁紙的時(shí)候一般操作如下:
1、打開(kāi)壁紙網(wǎng)頁(yè)
2、單擊壁紙圖(打開(kāi)指定壁紙的頁(yè)面)
3、選擇分辨率(我們要下載高清的圖)
4、保存圖片
實(shí)際操作時(shí),我們實(shí)現(xiàn)了如下幾步網(wǎng)頁(yè)地址的訪問(wèn):打開(kāi)了壁紙的網(wǎng)頁(yè)→單擊壁紙圖打開(kāi)指定頁(yè)面→選擇分辨率,點(diǎn)擊后打開(kāi)最終保存目標(biāo)圖片網(wǎng)頁(yè)→保存圖片
在爬蟲(chóng)的過(guò)程中我們就嘗試通過(guò)模擬瀏覽器打開(kāi)網(wǎng)頁(yè)的操作,一步步獲得、訪問(wèn)網(wǎng)頁(yè)、最后獲得目標(biāo)圖片的下載地址,對(duì)圖片進(jìn)行下載保存到指定路徑中
*這些中間過(guò)程中網(wǎng)頁(yè)的一些具體篩選條件的構(gòu)造,需要打開(kāi)指定頁(yè)面的源代碼去觀察和尋找包含有目的鏈接的標(biāo)簽
具體實(shí)現(xiàn)項(xiàng)目與注釋
這里我只想獲得一些指定的圖片,所以我先在網(wǎng)頁(yè)上搜索“長(zhǎng)門(mén)有希”,打開(kāi)了一個(gè)搜索結(jié)果頁(yè)面,發(fā)現(xiàn)在這個(gè)頁(yè)面上就已經(jīng)包含了同類型的其他壁紙鏈接,于是我一開(kāi)始就把最初訪問(wèn)的目的地址設(shè)置為這個(gè)搜索結(jié)果頁(yè)面
目標(biāo)結(jié)果頁(yè)面截圖:

圖中下標(biāo)為"1/29"."2/29"為其他同類型目標(biāo)壁紙,通過(guò)點(diǎn)擊這些圖片我們可以打開(kāi)新的目標(biāo)下載圖片頁(yè)面
這里我們查看一下網(wǎng)頁(yè)源代碼

相關(guān)文章
Pycharm配置導(dǎo)入torch報(bào)錯(cuò)Traceback的問(wèn)題及解決
這篇文章主要介紹了Pycharm配置導(dǎo)入torch報(bào)錯(cuò)Traceback的問(wèn)題及解決方案,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-12-12
Pytest測(cè)試報(bào)告工具Allure用法介紹
這篇文章介紹了Pytest測(cè)試報(bào)告工具Allure的用法,對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2022-07-07
Python實(shí)現(xiàn)帶參數(shù)的用戶驗(yàn)證功能裝飾器示例
這篇文章主要介紹了Python實(shí)現(xiàn)帶參數(shù)的用戶驗(yàn)證功能裝飾器,結(jié)合實(shí)例形式分析了Python用戶驗(yàn)證裝飾器具體定義及使用技巧,需要的朋友可以參考下2018-12-12
Python pickle模塊進(jìn)行序列化的實(shí)現(xiàn)示例
pickle模塊是一個(gè)用于實(shí)現(xiàn)數(shù)據(jù)序列化與反序列化的強(qiáng)大工具,本文就來(lái)介紹一下Python pickle模塊進(jìn)行序列化的實(shí)現(xiàn)示例,具有一定的參考價(jià)值,感興趣的可以了解一下2025-01-01
Python?socket之TCP通信及下載文件的實(shí)現(xiàn)
本文主要介紹了Python?socket之TCP通信及下載文件的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-02-02





