python3爬蟲(chóng)中多線程進(jìn)行解鎖操作實(shí)例
生活中我們?yōu)榱吮U戏块g里物品的安全,所以給門進(jìn)行上鎖,在我們需要進(jìn)入房間的時(shí)候又會(huì)重新打開(kāi)。同樣的之間我們講過(guò)多線程中的lock,作用是為了不讓多個(gè)線程運(yùn)行是出錯(cuò)所以進(jìn)行鎖住的指令。但是鑒于我們實(shí)際運(yùn)用中,因?yàn)榫€程和指令不會(huì)只有一個(gè),如果全部都進(jìn)行l(wèi)ock操作就會(huì)出錯(cuò)。所以今天小編為大家進(jìn)行l(wèi)ock的全面講解,同時(shí)為大家?guī)?lái)lock的解鎖方法。
由于線程之間隨機(jī)調(diào)度,所以在使用共享變量時(shí),某線程可能在執(zhí)行n條后,CPU接著執(zhí)行其他線程,很容易使得最終結(jié)果出錯(cuò)。為了多個(gè)線程同時(shí)操作一個(gè)內(nèi)存中的資源時(shí)不產(chǎn)生混亂,我們可以使用鎖。
Lock(指令鎖)是可用的最低級(jí)的同步指令。Lock處于鎖定狀態(tài)時(shí),不被特定的線程擁有。Lock包含兩種狀態(tài)——鎖定和非鎖定,以及兩個(gè)基本的方法。
當(dāng)線程請(qǐng)求鎖定時(shí),其他線程就不能獲得這把鎖,直到鎖定的線程釋放鎖,其他線程才能繼續(xù)使用。這就好比使用獨(dú)衛(wèi),某個(gè)人進(jìn)去了,把門鎖上了,另一個(gè)人必須等待里面的人出來(lái)才能繼續(xù)使用。
指令鎖只能被同一個(gè)線程調(diào)用一次,如果需要多次請(qǐng)求,則需要了解一下可重入鎖。
RLock(可重入鎖)是一個(gè)可以被同一個(gè)線程請(qǐng)求多次的同步指令。RLock使用了“擁有的線程”和“遞歸等級(jí)”的概念,處于鎖定狀態(tài)時(shí),RLock被某個(gè)線程擁有。擁有RLock的線程可以再次調(diào)用acquire(),釋放鎖時(shí)需要調(diào)用release()相同次數(shù)。
具體方法如下:
acquire([timeout]): 請(qǐng)求獲得鎖定。使線程進(jìn)入同步阻塞狀態(tài)。
release(): 釋放鎖。使用前線程必須已獲得鎖定,否則將拋出異常。
關(guān)于線程的鎖的案例,這里給出一個(gè)簡(jiǎn)單的指令鎖的示例,主要看下鎖的作用。
import threading
sub = 0
num = 1000000
lock = threading.Lock()
def add():
global sub,num
for i in range(1,num):
# 請(qǐng)求鎖
lock.acquire()
sub += 1
# 釋放鎖
lock.release()
def red():
sub -= 1
def main():
print("開(kāi)始運(yùn)算,sub的值為{}".format(sub))
t1 = threading.Thread(target=add,args=())
t2 = threading.Thread(target=red,args=())
t1.start()
t2.start()
t1.join()
t2.join()
print("結(jié)束運(yùn)算,sub的值為{}".format(sub))
if __name__ == '__main__':
main()
有鎖時(shí),肯定是交替執(zhí)行加減算法,但最后結(jié)果肯定還是可以為0。

注釋鎖后,再來(lái)看下結(jié)果。

再多執(zhí)行幾次后,會(huì)發(fā)現(xiàn)結(jié)束運(yùn)算后的sub值每次都不一樣,這其實(shí)就是因?yàn)楣蚕碜兞?,線程之間產(chǎn)生了混亂,導(dǎo)致sub的值無(wú)法確定。
以上就是python3爬蟲(chóng)中多線程進(jìn)行解鎖操作實(shí)例的詳細(xì)內(nèi)容,更多關(guān)于python3爬蟲(chóng)中多線程如何進(jìn)行解鎖操作的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!
- Python基礎(chǔ)進(jìn)階之海量表情包多線程爬蟲(chóng)功能的實(shí)現(xiàn)
- python3爬蟲(chóng)GIL修改多線程實(shí)例講解
- python3爬蟲(chóng)中多線程的優(yōu)勢(shì)總結(jié)
- python爬蟲(chóng)開(kāi)發(fā)之使用Python爬蟲(chóng)庫(kù)requests多線程抓取貓眼電影TOP100實(shí)例
- python支持多線程的爬蟲(chóng)實(shí)例
- python爬蟲(chóng)中多線程的使用詳解
- Python 微信爬蟲(chóng)完整實(shí)例【單線程與多線程】
- python面向?qū)ο蠖嗑€程爬蟲(chóng)爬取搜狐頁(yè)面的實(shí)例代碼
- python爬蟲(chóng)爬取快手視頻多線程下載功能
- Python3多線程爬蟲(chóng)實(shí)例講解代碼
- php與python實(shí)現(xiàn)的線程池多線程爬蟲(chóng)功能示例
- python 多線程爬取壁紙網(wǎng)站的示例
相關(guān)文章
在服務(wù)器端實(shí)現(xiàn)無(wú)間斷部署Python應(yīng)用的教程
這篇文章主要介紹了在服務(wù)器端實(shí)現(xiàn)無(wú)間斷部署Python應(yīng)用的教程,方法主要是Gunicorn進(jìn)行重載,需要的朋友可以參考下2015-04-04
Python中zip()函數(shù)的簡(jiǎn)單用法舉例
這篇文章主要給大家介紹了關(guān)于Python中zip()函數(shù)的簡(jiǎn)單用法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家學(xué)習(xí)或者使用Python具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-09-09
Python實(shí)現(xiàn)周期性抓取網(wǎng)頁(yè)內(nèi)容的方法
這篇文章主要介紹了Python實(shí)現(xiàn)周期性抓取網(wǎng)頁(yè)內(nèi)容的方法,涉及Python時(shí)間函數(shù)及正則匹配的相關(guān)操作技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-11-11
python K近鄰算法的kd樹(shù)實(shí)現(xiàn)
這篇文章主要介紹了python K近鄰算法的kd樹(shù)實(shí)現(xiàn),小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-09-09
python中requests庫(kù)+xpath+lxml簡(jiǎn)單使用
這篇文章主要介紹了python中requests庫(kù)+xpath+lxml簡(jiǎn)單使用,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-04-04

