盤點(diǎn)Python?爬蟲(chóng)中的常見(jiàn)加密算法
前言
今天小編就帶著大家來(lái)盤點(diǎn)一下數(shù)據(jù)抓取過(guò)程中這些主流的加密算法,它們有什么特征、加密的方式有哪些等等,知道了這些之后對(duì)于我們逆向破解這些加密的參數(shù)會(huì)起到不少的幫助!
相信大家在數(shù)據(jù)抓取的時(shí)候,會(huì)碰到很多加密的參數(shù),例如像是"token"、"sign"等等,今天小編就帶著大家來(lái)盤點(diǎn)一下數(shù)據(jù)抓取過(guò)程中這些主流的加密算法,它們有什么特征、加密的方式有哪些等等,知道了這些之后對(duì)于我們逆向破解這些加密的參數(shù)會(huì)起到不少的幫助!
1. 基礎(chǔ)常識(shí)
首先我們需要明白的是,什么是加密和解密?顧名思義
- 加密(Encryption): 將明文數(shù)據(jù)變換為密文的過(guò)程
- 解密(Decryption): 加密的逆過(guò)程,即由密文恢復(fù)出原明文的過(guò)程。
加密和解密算法的操作通常都是在一組密鑰的控制下進(jìn)行的,分別成為是加密密鑰(Encryption Key)和解密密鑰(Decryption Key),
如下圖所示:

而加密算法當(dāng)中又分為是對(duì)稱加密和非對(duì)稱加密以及散列算法,其中
- 對(duì)稱加密:即加密與解密時(shí)使用的是相同的密鑰,例如RC4、AES、DES等加密算法
- 非對(duì)稱加密:即加密與解密時(shí)使用不相同的密鑰,例如RSA加密算法等
- 散列算法:又稱為是哈希函數(shù)。對(duì)不同長(zhǎng)度的輸入消息產(chǎn)生固定的輸出,該輸出值就是散列值
2. Base64偽加密
Base64嚴(yán)格意義上來(lái)說(shuō)不算做事加密的算法,只是一種編碼的方式,它是一種用64個(gè)字符,分別是A-Z、a-z、0-9、+、/這64個(gè)字符,實(shí)現(xiàn)對(duì)數(shù)據(jù)的編碼,可用于在HTTP環(huán)境下傳遞較長(zhǎng)的標(biāo)識(shí)信息。采用Base64編碼具有不可讀性,需要解碼后才能閱讀。我們使用Python來(lái)對(duì)任意網(wǎng)址進(jìn)行Base64的編碼操作,代碼如下:
import base64
# 想將字符串轉(zhuǎn)編碼成base64,要先將字符串轉(zhuǎn)換成二進(jìn)制數(shù)據(jù)
url = "www.baidu.com"
bytes_url = url.encode("utf-8")
str_url = base64.b64encode(bytes_url) # 被編碼的參數(shù)必須是二進(jìn)制數(shù)據(jù)
print(str_url)輸出:
b'd3d3LmJhaWR1LmNvbQ=='
那么同樣地,我們也可以對(duì)其進(jìn)行解碼的操作,代碼如下:
url = "d3d3LmJhaWR1LmNvbQ=="
str_url = base64.b64decode(url).decode("utf-8")
print(str_url)輸出:
www.baidu.com
3. MD5加密
MD5是一種被廣泛使用的線性散列算法,且加密之后產(chǎn)生的是一個(gè)固定長(zhǎng)度(32位或者是16位)的數(shù)據(jù),由字母和數(shù)字組成,大小寫統(tǒng)一。其最后加密生成的數(shù)據(jù)是不可逆的,也就是說(shuō)不能夠輕易地通過(guò)加密后的數(shù)據(jù)還原到原始的字符串,除非是通過(guò)暴力破解的方式。
我們?cè)赑ython當(dāng)中來(lái)實(shí)現(xiàn)一下MD5加密:
import hashlib
str = 'this is a md5 demo.'
hl = hashlib.md5()
hl.update(str.encode(encoding='utf-8'))
print('MD5加密前為 :' + str)
print('MD5加密后為 :' + hl.hexdigest())輸出:
MD5加密前為 :this is a md5 demo.
MD5加密后為 :b2caf2a298a9254b38a2e33b75cfbe75
就像上文提到的,針對(duì)MD5加密可以通過(guò)暴力破解的方式來(lái)降低其安全性,因此在實(shí)操過(guò)程當(dāng)中,我們會(huì)添加鹽值(Salt)或者是雙重MD5加密等方式來(lái)增加其可靠性,代碼如下:
# post傳入的參數(shù)
params = "123456"
# 加密后需拼接的鹽值(Salt)
salt = "asdfkjalksdncxvm"
def md5_encrypt():
m = md5()
m.update(params.encode('utf8'))
sign1 = m.hexdigest()
return sign1
def md5_encrypt_with_salt():
m = md5()
m.update((md5_encrypt() + salt).encode('utf8'))
sign2 = m.hexdigest()
return sign24. AES/DES對(duì)稱加密
首先我們來(lái)講DES加密,全稱是Data Encryption Standard,即數(shù)據(jù)加密標(biāo)準(zhǔn),在對(duì)稱性加密當(dāng)中比較常見(jiàn)的一種,也就是加密和解密過(guò)程當(dāng)中使用的密鑰是相同的,因此想要破解的話,通過(guò)暴力枚舉的方式,只要計(jì)算的能力足夠強(qiáng)還是可以被破解的。
AES的全稱是Advanced Encryption Standard,是DES算法的替代者,也是當(dāng)今最流行的對(duì)稱加密算法之一。想要弄清楚AES算法,首先就得弄明白三個(gè)基本的概念:密鑰、填充和模式。
密鑰
密鑰我們之前已經(jīng)說(shuō)了很多了,大家可以將其想象成是一把鑰匙,既可以用其來(lái)進(jìn)行上鎖,可以用其來(lái)進(jìn)行解鎖。AES支持三種長(zhǎng)度的密鑰:128位、192位以及256位。
填充
而至于填充這一概念,AES的分組加密的特性我們需要了解,具體如下圖所示:

簡(jiǎn)單來(lái)說(shuō),AES算法在對(duì)明文加密的時(shí)候,并不是把整個(gè)明文一股腦兒地加密成一整段密文,而是把明文拆分成一個(gè)個(gè)獨(dú)立的明文塊,每一個(gè)明文塊的長(zhǎng)度為128比特。
這些明文塊經(jīng)過(guò)AES加密器的復(fù)雜處理之后,生成一個(gè)個(gè)獨(dú)立的密文塊,將這些密文塊拼接到一起就是最終的AES加密的結(jié)果了。
那么這里就有一個(gè)問(wèn)題了,要是有一段明文的長(zhǎng)度是196比特,如果按照每128比特一個(gè)明文塊來(lái)拆分的話,第二個(gè)明文塊只有64比特了,不足128比特該怎么辦呢?這個(gè)時(shí)候就輪到填充來(lái)發(fā)揮作用了,默認(rèn)的填充方式是PKCS5Padding以及ISO10126Padding。
不過(guò)在AES加密的時(shí)候使用了某一種填充方式,解密的時(shí)候也必須采用同樣的填充方式。
模式
AES的工作模式,體現(xiàn)在了把明文塊加密成密文塊的處理過(guò)程中,主要有五種不同的工作模式,分別是CBC、ECB、CTR、CFB以及OFB模式,同樣地,如果在AES加密過(guò)程當(dāng)中使用了某一種工作模式,解密的時(shí)候也必須采用同樣地工作模式。最后我們用Python來(lái)實(shí)現(xiàn)一下AES加密。
import base64
from Crypto.Cipher import AES
def AES_encrypt(text, key):
pad = 16 - len(text) % 16
text = text + pad * chr(pad)
text = text.encode("utf-8")
encryptor = AES.new(key.encode('utf-8'), AES.MODE_ECB)
encrypt_text = encryptor.encrypt(text)
encrypt_text = base64.b64encode(encrypt_text)
return encrypt_text.decode('utf-8')到此這篇關(guān)于盤點(diǎn)Python 爬蟲(chóng)中的常見(jiàn)加密算法的文章就介紹到這了,更多相關(guān)Python 加密算法內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- Python爬蟲(chóng)程序中使用生產(chǎn)者與消費(fèi)者模式時(shí)進(jìn)程過(guò)早退出的問(wèn)題
- Python爬蟲(chóng)庫(kù)urllib的使用教程詳解
- Python利用yield?form實(shí)現(xiàn)異步協(xié)程爬蟲(chóng)
- python爬蟲(chóng)之requests庫(kù)使用代理方式
- python?基于aiohttp的異步爬蟲(chóng)實(shí)戰(zhàn)詳解
- Python爬蟲(chóng)框架NewSpaper使用詳解
- 通過(guò)python爬蟲(chóng)mechanize庫(kù)爬取本機(jī)ip地址的方法
- Python爬蟲(chóng)學(xué)習(xí)之requests的使用教程
- python爬蟲(chóng)beautiful?soup的使用方式
- Python爬蟲(chóng)之超級(jí)鷹驗(yàn)證碼應(yīng)用
- Python爬蟲(chóng)Requests庫(kù)的使用詳情
- python爬蟲(chóng)模擬登錄之圖片驗(yàn)證碼實(shí)現(xiàn)詳解
- Python爬蟲(chóng)eval實(shí)現(xiàn)看漫畫漫畫柜mhgui實(shí)戰(zhàn)分析
- python爬蟲(chóng)實(shí)戰(zhàn)項(xiàng)目之爬取pixiv圖片
- 使用python爬蟲(chóng)實(shí)現(xiàn)子域名探測(cè)問(wèn)題
- python爬蟲(chóng)之代理ip正確使用方法實(shí)例
- Python爬蟲(chóng)Xpath定位數(shù)據(jù)的兩種方法
- Python7個(gè)爬蟲(chóng)小案例詳解(附源碼)上篇
相關(guān)文章
Python數(shù)字圖像處理代數(shù)之加減乘運(yùn)算
這篇文章主要介紹了Python數(shù)字圖像處理代數(shù)運(yùn)算,對(duì)其中的加、減、乘運(yùn)算分別作了詳細(xì)的講解,有需要的朋友可以借鑒參考下,希望能夠有所幫助2021-09-09
Python超有趣實(shí)例通過(guò)冒泡排序來(lái)實(shí)現(xiàn)LOL厄斐琉斯控槍
冒泡排序是一種簡(jiǎn)單的排序算法,它也是一種穩(wěn)定排序算法。其實(shí)現(xiàn)原理是重復(fù)掃描待排序序列,并比較每一對(duì)相鄰的元素,當(dāng)該對(duì)元素順序不正確時(shí)進(jìn)行交換。一直重復(fù)這個(gè)過(guò)程,直到?jīng)]有任何兩個(gè)相鄰元素可以交換,就表明完成了排序2022-05-05
Python+wxPython實(shí)現(xiàn)一個(gè)簡(jiǎn)單的音樂(lè)播放器
這篇文章主要為大家詳細(xì)介紹了如何使用Python編程語(yǔ)言和wxPython模塊創(chuàng)建一個(gè)簡(jiǎn)單的音樂(lè)播放器,文中的示例代碼講解詳細(xì),感興趣的可以了解下2023-09-09
Python針對(duì)不同文本長(zhǎng)度的處理方案總結(jié)與對(duì)比
這篇文章主要為大家詳細(xì)介紹了Python如何針對(duì)不同文本長(zhǎng)度的處理方案,結(jié)合層次化編碼和檢索優(yōu)化策略,感興趣的小伙伴可以參考一下2025-02-02
python簡(jiǎn)單直接獲取windows明文密碼操作技巧
在實(shí)戰(zhàn)中,拿到一臺(tái)Windows服務(wù)器權(quán)限,如果可以直接獲取Windows明文密碼的話,就可以更容易深入挖掘。本文分享幾個(gè)獲取Windows明文密碼的技巧,簡(jiǎn)單直接且有效2021-10-10
Pycharm中切換pytorch的環(huán)境和配置的教程詳解
這篇文章主要介紹了Pycharm中切換pytorch的環(huán)境和配置,本文給大家介紹的非常詳細(xì),對(duì)大家的工作或?qū)W習(xí)具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-03-03
python分段函數(shù)的實(shí)現(xiàn)示例
分段函數(shù)是一種數(shù)學(xué)函數(shù),它將定義域分成若干個(gè)區(qū)間,每個(gè)區(qū)間對(duì)應(yīng)一個(gè)函數(shù),本文主要介紹了python分段函數(shù)的實(shí)現(xiàn)示例,具有一定的參考價(jià)值,感興趣的可以了解一下2023-12-12
pip matplotlib報(bào)錯(cuò)equired packages can not be built解決
這篇文章主要介紹了pip matplotlib報(bào)錯(cuò)equired packages can not be built解決,具有一定借鑒價(jià)值,需要的朋友可以參考下2018-01-01

