日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程语言 > python >内容正文

python

python3多线程异步爬虫_python3爬虫中多线程进行解锁操作实例

發布時間:2025/3/15 python 16 豆豆
生活随笔 收集整理的這篇文章主要介紹了 python3多线程异步爬虫_python3爬虫中多线程进行解锁操作实例 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

生活中我們為了保障房間里物品的安全,所以給門進行上鎖,在我們需要進入房間的時候又會重新打開。同樣的之間我們講過多線程中的lock,作用是為了不讓多個線程運行是出錯所以進行鎖住的指令。但是鑒于我們實際運用中,因為線程和指令不會只有一個,如果全部都進行lock操作就會出錯。所以今天小編為大家進行lock的全面講解,同時為大家帶來lock的解鎖方法。

由于線程之間隨機調度,所以在使用共享變量時,某線程可能在執行n條后,CPU接著執行其他線程,很容易使得最終結果出錯。為了多個線程同時操作一個內存中的資源時不產生混亂,我們可以使用鎖。

Lock(指令鎖)是可用的最低級的同步指令。Lock處于鎖定狀態時,不被特定的線程擁有。Lock包含兩種狀態——鎖定和非鎖定,以及兩個基本的方法。

當線程請求鎖定時,其他線程就不能獲得這把鎖,直到鎖定的線程釋放鎖,其他線程才能繼續使用。這就好比使用獨衛,某個人進去了,把門鎖上了,另一個人必須等待里面的人出來才能繼續使用。

指令鎖只能被同一個線程調用一次,如果需要多次請求,則需要了解一下可重入鎖。

RLock(可重入鎖)是一個可以被同一個線程請求多次的同步指令。RLock使用了“擁有的線程”和“遞歸等級”的概念,處于鎖定狀態時,RLock被某個線程擁有。擁有RLock的線程可以再次調用acquire(),釋放鎖時需要調用release()相同次數。

具體方法如下:

acquire([timeout]): 請求獲得鎖定。使線程進入同步阻塞狀態。

release(): 釋放鎖。使用前線程必須已獲得鎖定,否則將拋出異常。

關于線程的鎖的案例,這里給出一個簡單的指令鎖的示例,主要看下鎖的作用。

import threading

sub = 0

num = 1000000

lock = threading.Lock()

def add():

global sub,num

for i in range(1,num):

# 請求鎖

lock.acquire()

sub += 1

# 釋放鎖

lock.release()

def red():

sub -= 1

def main():

print("開始運算,sub的值為{}".format(sub))

t1 = threading.Thread(target=add,args=())

t2 = threading.Thread(target=red,args=())

t1.start()

t2.start()

t1.join()

t2.join()

print("結束運算,sub的值為{}".format(sub))

if __name__ == '__main__':

main()

有鎖時,肯定是交替執行加減算法,但最后結果肯定還是可以為0。

注釋鎖后,再來看下結果。

再多執行幾次后,會發現結束運算后的sub值每次都不一樣,這其實就是因為共享變量,線程之間產生了混亂,導致sub的值無法確定。

以上就是python3爬蟲中多線程進行解鎖操作實例的詳細內容,更多關于python3爬蟲中多線程如何進行解鎖操作的資料請關注WEB開發者其它相關文章!

總結

以上是生活随笔為你收集整理的python3多线程异步爬虫_python3爬虫中多线程进行解锁操作实例的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。