使用wget遞歸鏡像網(wǎng)站
有時(shí)間看到別人網(wǎng)站的頁(yè)面比較漂亮，就想給扒皮下來(lái)，學(xué)習(xí)學(xué)習(xí)。分享一個(gè)我常用網(wǎng)站扒皮命令wget
這個(gè)命令可以以遞歸的方式下載整站，并可以將下載的頁(yè)面中的鏈接轉(zhuǎn)換為本地鏈接。
wget加上參數(shù)之后，即可成為相當(dāng)強(qiáng)大的下載工具。
wget命令詳解
wget -r -p -np -k http://xxx.com/xxx
-r, --recursive（遞歸） specify recursive download.（指定遞歸下載）
-k, --convert-links（轉(zhuǎn)換鏈接） make links in downloaded HTML point to local files.（將下載的HTML頁(yè)面中的鏈接轉(zhuǎn)換為相對(duì)鏈接即本地鏈接）
-p, --page-requisites（頁(yè)面必需元素） get all images, etc. needed to display HTML page.（下載所有的圖片等頁(yè)面顯示所需的內(nèi)容）
-np, --no-parent（不追溯至父級(jí)） don't ascend to the parent directory.
另外斷點(diǎn)續(xù)傳用-nc參數(shù) 日志 用-o參數(shù)
拿我自己的網(wǎng)站扒皮試一下吧
執(zhí)行
wget -r -p -np -k https://xxx.com/
命令
This entry was posted in 服務(wù)器 and tagged wget, 鏡像網(wǎng)站. Bookmark the permalink.
相關(guān)文章
linux虛擬網(wǎng)絡(luò)設(shè)備之vlan配置詳解
這篇文章主要給大家介紹了關(guān)于linux虛擬網(wǎng)絡(luò)設(shè)備之vlan配置的相關(guān)資料，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧。2017-12-12
centOS7 橋接模式設(shè)置靜態(tài)Ip的方法步驟
這篇文章主要給大家介紹了關(guān)于centOS7 橋接模式設(shè)置靜態(tài)Ip的方法步驟，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家學(xué)習(xí)或者使用centOS7具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07
這篇文章主要介紹了ssh 登錄很慢該如何解決的相關(guān)資料,這里提供了兩種方法，DNS反向解析及關(guān)閉ssh的gssapi認(rèn)證的解決辦法，需要的朋友可以參考下2017-01-01
這篇文章主要介紹了ubuntu下Java 8的安裝步驟，文中通過(guò)一步步的步驟介紹很詳細(xì)，對(duì)大家具有一定的參考價(jià)值，有需要的朋友們下面來(lái)一起看看吧。2017-01-01
linux中的系統(tǒng)掛載(卸載)U盤(pán)(文件系統(tǒng))
這篇文章主要介紹了linux中的系統(tǒng)掛載(卸載)U盤(pán)(文件系統(tǒng)),具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-09-09
這篇文章主要給大家介紹了一些你可能不知道的linux文件權(quán)限管理，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2018-11-11
CentOS7.4系統(tǒng)默認(rèn)安裝了Vi編輯器,但未完全安裝Vim,本文介紹如何通過(guò)yum命令完整安裝Vim所需的四個(gè)包,并提供兩種編輯環(huán)境設(shè)置方式2024-11-11
CentOS7.6系統(tǒng)下使用yum配置lnmp環(huán)境的方法
這篇文章主要介紹了CentOS7.6系統(tǒng)下使用yum配置lnmp環(huán)境的方法,需要的朋友可以參考下2018-12-12
在linux系統(tǒng)之中, 一切設(shè)備皆文件, 所以我們的U盤(pán)也是一個(gè)文件.磁盤(pán)設(shè)備被抽象成sda文件, U盤(pán)設(shè)備被抽象成sdb文件。這篇文章主要介紹了Linux系統(tǒng)下使用U盤(pán)的方法,需要的朋友可以參考下2016-10-10
Ubuntu16.04 靜態(tài)IP地址設(shè)置（NAT方式）
這篇文章主要介紹了Ubuntu16.04 靜態(tài)IP地址設(shè)置（NAT方式），詳細(xì)的介紹了為VMware虛擬機(jī)內(nèi)安裝的Ubuntu 16.04設(shè)置靜態(tài)IP地址NAT方式，有興趣的可以了解一下。2017-02-02