Python3.x:threading module线程锁、递归锁、信号量

线程锁

大家已经知道了同一个进程下的线程数据之间可以共享,也知道多线程中有GIL锁,一个时刻只有一线程在运行,所以说就是有很多线程在修改这些共享数据,那么不是同时运行的话修改数据会不会出现错误呢?在Python2中就会出现这种情况,当你开启了很多条线程,然后这些线程一起修改全局变量时,最后得出的结果可能跟期望的不太一样

在Python2中出现的错误情况

在这个时候Python就提供了另一把锁,给用户的锁,叫做线程锁,可以在多个线程操作共享数据时更加有规律,来防止操作数据失误的情况出现,下面我们就了解一下如何使用线程锁

import threading


def run():
    # 获取锁
    lock.acquire()
    # 声明全局变量num
    global num
    # num+=1
    num += 1
    # 释放锁
    lock.release()


# 生成线程锁实例
lock = threading.Lock()
num = 0

# 开启1000个线程
for i in range(1000):
    t = threading.Thread(target=run)
    t.start()

print("-----all thread has finshed")
print("num:", num)

这里要注意的事获取锁与释放锁之间的这一段所操作的数据量不是很大,如果数据量很大,需要的时间很多,那么程序就会变成串行

在Python3中这种情况已经不会出现了,但是在2中的这种情况与处理方法还是要了解,并且,在操作共享数据时,不管Python2还是Python3,都要加上线程锁,这是最好的做法

递归锁

接下来我们去了解另一种情况,就是锁中锁(递归锁),我们分出一个线程,使用线程锁之后里面再调用别的函数,然后调用的这个函数中再使用线程锁的话就不能再使用Lock()实例了,不然就会出现死循环错误,这是因为一把锁对应一个钥匙,锁里面再加一把锁就会导致程序分不清哪把钥匙开哪把锁,导致程序一直在锁中出不来,如下

import threading


def run1():
    print("grab the first part data")
    # 获取锁
    lock.acquire()
    global num
    num += 1
    # 释放锁
    lock.release()
    return num


def run2():
    print("grab the second part data")
    # 获取锁
    lock.acquire()
    global num2
    num2 += 1
    # 释放锁
    lock.release()
    return num2


def run3():
    # 获取锁
    lock.acquire()
    # 去跑run1
    res = run1()
    print('--------between run1 and run2-----')
    # 去跑run2
    res2 = run2()
    # 释放锁
    lock.release()
    print(res, res2)


if __name__ == '__main__':
    # 初始化两个为0的变量
    num, num2 = 0, 0
    # 生成lock实例
    lock = threading.Lock()
    # 开始10个线程
    for i in range(10):
        # 线程跑的是run3
        t = threading.Thread(target=run3)
        t.start()

# 判读是否有多个线程,有多个就继续打印,只剩一个说明子线程都执行完了,只剩主线程了,然后跳出循环程序结束
# 可以用之前学到的join()方法来实现一样的效果
while threading.active_count() != 1:
    print(threading.active_count())
else:
    print('----all threads done---')
    print(num, num2)
程序进入死循环

可以看到,一直打印线程数11,说明一直有11个线程在活跃,说明分出的10个线程一直在运行不结束,这个时候就不能使用Lock()了,而是使用RLock(),让我们修改下再来运行试试



看来,只要将Lock改为RLock就可以解决这种锁中锁(递归锁)的情况了

信号量

信号量的用法跟线程锁非常的相似,其实其中的原理与线程锁并没有多大的区别,只不过线程锁锁住一个线程在运行和修改数据,而信号量可以自己控制同一时刻运行几个线程和几个线程修改数据,也就是设置最大同时运行的线程数

import threading
import time


def run(n):
    # 获取信号量
    semaphore.acquire()
    print('task %s is running' % n)
    # 暂停1s方便看出一次运行几个线程
    time.sleep(1)
    # 释放信号量
    semaphore.release()


if __name__ == '__main__':
    # 生成信号量实例并设置信号量为5
    semaphore = threading.BoundedSemaphore(5)
    # 开启50个线程
    for i in range(50):
        t = threading.Thread(target=run, args=(i,))
        t.start()

# 线程没有运行完就不退出 
while threading.active_count() != 1:
    pass
else:
    print('----all threads done---')

这里可以自己运行一下,很容易可以看出一次运行五个线程

虽然我们看到的是一次执行五个线程,但并不是五个一组五个一组分组执行的,因为这五个线程同时完成,所以我们看不出来,但是其中的过程是执行完一个线程放进去一个线程,假如这五个中有两个先完成,那么就会立刻再放进去两个,也就是说这五个线程之间不会互相等待,这个设置的信号量5不是按5来分组,而是同时运行的线程最大数,可以写多个执行时间不同的函数然后一次执行几个来证明这一点

转载请注明出处

python自学技术互助扣扣群:670402334

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,588评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,456评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,146评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,387评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,481评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,510评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,522评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,296评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,745评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,039评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,202评论 1 343
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,901评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,538评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,165评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,415评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,081评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,085评论 2 352

推荐阅读更多精彩内容

  • 引用自多线程编程指南应用程序里面多个线程的存在引发了多个执行线程安全访问资源的潜在问题。两个线程同时修改同一资源有...
    Mitchell阅读 1,987评论 1 7
  • Java8张图 11、字符串不变性 12、equals()方法、hashCode()方法的区别 13、...
    Miley_MOJIE阅读 3,698评论 0 11
  • 在开发Java多线程应用程序中,各个线程之间由于要共享资源,必须用到锁机制。Java提供了多种多线程锁机制的实现方...
    千淘萬漉阅读 6,902评论 1 33
  • 从三月份找实习到现在,面了一些公司,挂了不少,但最终还是拿到小米、百度、阿里、京东、新浪、CVTE、乐视家的研发岗...
    时芥蓝阅读 42,230评论 11 349
  • 密林狭窄,这剑阵狭长,如同灵蛇形状,元力贯通,将极修堂众人的力量集结一处,首尾相应,击尾则首应,击腰则首尾相应,虽...
    荣蔓蔓阅读 303评论 3 3