返回顶部
首页 > 资讯 > 后端开发 > Python >Python中threading库实现线程锁与释放锁
  • 606
分享到

Python中threading库实现线程锁与释放锁

Python线程锁Python释放锁 2022-06-02 22:06:06 606人浏览 安东尼

Python 官方文档:入门教程 => 点击学习

摘要

目录控制资源访问判断是否有另一个线程请求锁with lock同步线程Condition屏障(barrier)有限资源的并发访问隐藏资源控制资源访问 前文提到threading库在多线程时,对同一资源的访问容易导致破坏

目录
  • 控制资源访问
  • 判断是否有另一个线程请求
  • with lock
  • 同步线程
    • Condition
    • 屏障(barrier)
  • 有限资源的并发访问
    • 隐藏资源

      控制资源访问

      前文提到threading库在多线程时,对同一资源的访问容易导致破坏与丢失数据。为了保证安全的访问一个资源对象,我们需要创建锁。

      示例如下:

      
      import threading
      import time
      
      class AddThread():
          def __init__(self, start=0):
              self.lock = threading.Lock()
              self.value = start
      
          def increment(self):
              print("Wait Lock")
              self.lock.acquire()
              try:
                  print("Acquire Lock")
                  self.value += 1
                  print(self.value)
              finally:
                  self.lock.release()
      
      def worker(a):
          time.sleep(1)
          a.increment()
      
      addThread = AddThread()
      for i in range(3):
          t = threading.Thread(target=worker, args=(addThread,))
          t.start()

      运行之后,效果如下:

      解锁

      acquire()会通过锁进行阻塞其他线程执行中间段,release()释放锁,可以看到,基本都是获得锁之后才执行。避免了多个线程同时改变其资源对象,不会造成混乱。

      判断是否有另一个线程请求锁

      要确定是否有另一个线程请求锁而不影响当前的线程,可以设置acquire()的参数blocking=False。

      示例如下:

      
      import threading
      import time
      
      def worker2(lock):
          print("worker2 Wait Lock")
          while True:
              lock.acquire()
              try:
                  print("Holding")
                  time.sleep(0.5)
              finally:
                  print("not Holding")
                  lock.release()
              time.sleep(0.5)
      
      def worker1(lock):
          print("worker1 Wait Lock")
          num_acquire = 0
          value = 0
          while num_acquire < 3:
              time.sleep(0.5)
              have_it = lock.acquire(blocking=False)
              try:
                  value += 1
                  print(value)
                  print("Acquire Lock")
                  if have_it:
                      num_acquire += 1
              finally:
                  print("release Lock")
                  if have_it:
                      lock.release()
      
      lock = threading.Lock()
      Word2Thread = threading.Thread(
          target=worker2,
          name='work2',
          args=(lock,)
      )
      word2Thread.start()
      word1Thread = threading.Thread(
          target=worker1,
          name='work1',
          args=(lock,)
      )
      word1Thread.start()
      

      运行之后,效果如下:

      8次

      这里,我们需要迭代很多次,work1才能获取3次锁。但是尝试了很8次。

      with lock

      前文,我们通过lock.acquire()与lock.release()实现了锁的获取与释放,但其实我们python还给我们提供了一个更简单的语法,通过with lock来获取与释放锁。

      示例如下:

      
      import threading
      import time
      
      class AddThread():
          def __init__(self, start=0):
              self.lock = threading.Lock()
              self.value = start
      
          def increment(self):
              print("Wait Lock")
              with self.lock:
                  print("lock acquire")
                  self.value += 1
                  print(self.value)
              print("lock release")
      
      def worker(a):
          time.sleep(1)
          a.increment()
      
      addThread = AddThread()
      for i in range(3):
          t = threading.Thread(target=worker, args=(addThread,))
          t.start()
      

      这里,我们只是将最上面的例子改变了一下。效果如下:

      效果

      需要注意的是,正常的Lock对象不能请求多次,即使是由同一个线程请求也不例外。如果同一个调用链中的多个函数访问一个锁,则会发生意外。如果期望在同一个线程的不同代码需要重新获得锁,那么这种情况下使用RLock。

      同步线程

      Condition

      在实际的操作中,我们还可以使用Condition对象来同步线程。由于Condition使用了一个Lock,所以它可以绑定到一个共享资源,允许多个线程等待资源的更新。

      示例如下:

      
      import threading
      import time
      
      def consumer(cond):
          print("waitCon")
          with cond:
              cond.wait()
              print('获取更新的资源')
      
      def producer(cond):
          print("worker")
          with cond:
              print('更新资源')
              cond.notifyAll()
      
      cond = threading.Condition()
      t1 = threading.Thread(name='t1', target=consumer, args=(cond,))
      t2 = threading.Thread(name='t2', target=consumer, args=(cond,))
      t3 = threading.Thread(name='t3', target=producer, args=(cond,))
      t1.start()
      time.sleep(0.2)
      t2.start()
      time.sleep(0.2)
      t3.start()
      

      运行之后,效果如下:

      资源

      这里,我们通过producer线程处理完成之后调用notifyAll(),consumer等线程等到了它的更新,可以类比为观察者模式。这里是,当一个线程用完资源之后时,则会自动通知依赖它的所有线程。

      屏障(barrier)

      屏障是另一种线程的同步机制。barrier会建立一个控制点,所有参与的线程会在这里阻塞,直到所有这些参与方都到达这一点。采用这种方法,线程可以单独启动然后暂停,直到所有线程都准备好了才可以继续。

      示例如下:

      
      import threading
      import time
      
      def worker(barrier):
          print(threading.current_thread().getName(), "worker")
          worker_id = barrier.wait()
          print(threading.current_thread().getName(), worker_id)
      
      threads = []
      barrier = threading.Barrier(3)
      for i in range(3):
          threads.append(
              threading.Thread(
                  name="t" + str(i),
                  target=worker,
                  args=(barrier,)
              )
          )
      for t in threads:
          print(t.name, 'starting')
          t.start()
          time.sleep(0.1)
      
      for t in threads:
          t.join()
      

      运行之后,效果如下:

      屏障

      从控制台的输出会发发现,barrier.wait()会阻塞线程,直到所有线程被创建后,才同时释放越过这个控制点继续执行。wait()的返回值指示了释放的参与线程数,可以用来限制一些线程做清理资源等动作。

      当然屏障Barrier还有一个abort()方法,该方法可以使所有等待线程接收一个BroKenBarrierError。如果线程在wait()上被阻塞而停止处理,会产生这个异常,通过except可以完成清理工作。

      有限资源的并发访问

      除了多线程可能访问同一个资源之外,有时候为了性能,我们也会限制多线程访问同一个资源的数量。例如,线程池支持同时连接,但数据可能是固定的,或者一个网络APP提供的并发下载数支持固定数目。这些连接就可以使用Semaphore来管理。

      示例如下:

      
      import threading
      import time
      
      class WorkerThread(threading.Thread):
          def __init__(self):
              super(WorkerThread, self).__init__()
              self.lock = threading.Lock()
              self.value = 0
      
          def increment(self):
              with self.lock:
                  self.value += 1
                  print(self.value)
      
      def worker(s, pool):
          with s:
              print(threading.current_thread().getName())
              pool.increment()
              time.sleep(1)
              pool.increment()
      
      pool = WorkerThread()
      s = threading.Semaphore(2)
      for i in range(5):
          t = threading.Thread(
              name="t" + str(i),
              target=worker,
              args=(s, pool,)
          )
          t.start()
      

      运行之后,效果如下:

      控制台

      从图片虽然能看所有输出,但无法看到其停顿的事件。读者自己运行会发现,每次顶多只有两个线程在工作,是因为我们设置了threading.Semaphore(2)。

      隐藏资源

      在实际的项目中,有些资源需要锁定以便于多个线程使用,而另外一些资源则需要保护,以使它们对并非使这些资源的所有者的线程隐藏。

      local()函数会创建一个对象,它能够隐藏值,使其在不同的线程中无法被看到。示例如下:

      
      import threading
      import random
      
      def show_data(data):
          try:
              result = data.value
          except AttributeError:
              print(threading.current_thread().getName(), "No value")
          else:
              print(threading.current_thread().getName(), "value=", result)
      
      def worker(data):
          show_data(data)
          data.value = random.randint(1, 100)
          show_data(data)
      
      local_data = threading.local()
      show_data(local_data)
      local_data.value = 1000
      show_data(local_data)
      
      for i in range(2):
          t = threading.Thread(
              name="t" + str(i),
              target=worker,
              args=(local_data,)
          )
          t.start()
      

      运行之后,效果如下:

      输出

      这里local_data.value对所有线程都不可见,除非在某个线程中设置了这个属性,这个线程才能看到它。

      到此这篇关于Python中threading库实现线程锁与释放锁的文章就介绍到这了,更多相关Python 线程锁与释放锁内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

      --结束END--

      本文标题: Python中threading库实现线程锁与释放锁

      本文链接: https://lsjlt.com/news/10644.html(转载时请注明来源链接)

      有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

      猜你喜欢
      • Python中threading库实现线程锁与释放锁
        目录控制资源访问判断是否有另一个线程请求锁with lock同步线程Condition屏障(barrier)有限资源的并发访问隐藏资源控制资源访问 前文提到threading库在多线程时,对同一资源的访问容易导致破坏...
        99+
        2022-06-02
        Python 线程锁 Python 释放锁
      • Python中threading库如何实现线程锁与释放锁
        小编给大家分享一下Python中threading库如何实现线程锁与释放锁,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!控制资源访问前文提到threading库在...
        99+
        2023-06-15
      • python多线程互斥锁与死锁
        目录一、多线程间的资源竞争二、互斥锁1.互斥锁示例2.可重入锁与不可重入锁三、死锁一、多线程间的资源竞争 以下列task1(),task2()两个函数为例,分别将对全局变量num加一...
        99+
        2024-04-02
      • Linux释放线程锁的方法是什么
        Linux中释放线程锁的方法是调用pthread_mutex_unlock函数。这个函数用于释放一个已经加锁的互斥锁,使得其他线程可...
        99+
        2024-03-15
        Linux
      • Java自动释放锁如何实现
        本篇内容介绍了“Java自动释放锁如何实现”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!前言Python 提供了 try-with-lock...
        99+
        2023-06-30
      • Python之守护线程与锁
          # 守护线程随着子线程结束而结束,与守护进程不一样--守护进程随着主进程代码执行完毕而结束  # from threading import Thread  # import time  #  # def func1():  # whi...
        99+
        2023-01-31
        线程 Python
      • python中怎么实现threading线程同步
        小编给大家分享一下python中怎么实现threading线程同步,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!说明threading模块具有实现锁定的内置功能,允许同步线程。为了防止数据损坏或丢失,需要锁定来控制共享资源...
        99+
        2023-06-20
      • python多线程中互斥锁与死锁的示例分析
        小编给大家分享一下python多线程中互斥锁与死锁的示例分析,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!一、多线程间的资源竞争以下列task1(),task2()两个函数为例,分别将对全局变量num加一重复一千万次循环(...
        99+
        2023-06-29
      • python多线程互斥锁与死锁问题详解
        目录一、多线程共享全局变量二、给线程加一把锁锁三、死锁问题总结一、多线程共享全局变量 代码实现的功能: 创建work01与worker02函数,对全局变量进行加一操作创建main函数...
        99+
        2024-04-02
      • python中threading实现线程的示例分析
        小编给大家分享一下python中threading实现线程的示例分析,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!过程说明从Thread类构成子类。覆盖方法根据需...
        99+
        2023-06-20
      • Python中GIL全局解释锁如何实现
        今天小编给大家分享一下Python中GIL全局解释锁如何实现的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。1.为什么有GIL...
        99+
        2023-07-05
      • Java自动释放锁的三种实现方案
        目录前言方案1 使用AutoCloseable方案2 使用lambda方案3 代理模式(1)动态代理(2)CglibShow me the code总结前言 Python 提供了 t...
        99+
        2024-04-02
      • Python用threading实现多线程详解
        多线程 多线程是个提高程序运行效率的好办法,本来要顺序执行的程序现在可以并行执行,可想而知效率要提高很多。但是多线程也不是能提高所有程序的效率。程序的两个极端是‘CPU 密集型'和‘I/O 密集型'两种,多...
        99+
        2022-06-04
        多线程 详解 Python
      • Python并行编程多线程锁机制Lock与RLock实现线程同步
        目录什么是锁机制?Lock() 管理线程RLock() 与Lock()的区别什么是锁机制? 要回答这个问题,我们需要知道为什么需要使用锁机制。前面我们谈到一个进程内的多个线程的某些资...
        99+
        2024-04-02
      • Java中死锁与活锁的具体实现
        目录活锁与死锁活锁死锁死锁的四个必要条件互斥条件请求和保持条件不剥夺条件环路等待条件死锁示例死锁排查总结一下如何避免死锁预防死锁设置加锁顺序活锁示例解决活锁活锁与死锁 活锁 活锁同样...
        99+
        2024-04-02
      • Python实现的多线程同步与互斥锁功能示例
        本文实例讲述了Python实现的多线程同步与互斥锁功能。分享给大家供大家参考,具体如下: #! /usr/bin/env python #coding=utf-8 import threading im...
        99+
        2022-06-04
        示例 多线程 功能
      • Python threading和Thread模块及线程的实现
        目录前言1. 线程1.1 线程模块1.1.1 Thread类1.2 创建线程1.2.1 实例Thread类法创建线程1.2.1 继承重写Thread类法创建线程1.3 Join &a...
        99+
        2024-04-02
      • Python中线程锁的使用介绍
        目录前言方式一:使用try/finally,确保锁肯定会被释放。方式二:with语句避免使用try/finally。总结前言 当有多个线程,且它们同时访问同一资源时,需要考虑如何避免...
        99+
        2024-04-02
      • Python并发编程多进程,多线程及GIL全局解释器锁
        目录1. 并发与并行2. 线程与进程的应用场景2.1. 并行/并发编程相关的技术栈3. Python中的GIL是什么,它影响什么1. 并发与并行 所谓的并行(Parallelism)...
        99+
        2024-04-02
      • Java编程之多线程死锁与线程间通信简单实现代码
        死锁定义 死锁是指两个或者多个线程被永久阻塞的一种局面,产生的前提是要有两个或两个以上的线程,并且来操作两个或者多个以上的共同资源;我的理解是用两个线程来举例,现有线程A和B同时操作两个共同资源a和b,A操作a的时候上锁LockA,继续执行...
        99+
        2023-05-30
        java 多线程 ava
      软考高级职称资格查询
      编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
      • 官方手机版

      • 微信公众号

      • 商务合作