Python之queue模块

queue模块实现了多生产者,多消费者的队列。当要求信息必须在多线程间安全交换,这个模块在同步线程编程时非常有用,Queue模块实现了所有要求的锁机制。内部实现是在抢占式线程加上临时锁,但是没有涉

大家好,又见面了,我是全栈君,今天给大家准备了Idea注册码。

  queue模块实现了多生产者,多消费者的队列。当要求信息必须在多线程间安全交换,这个模块在同步线程编程时非常有用 ,Queue模块实现了所有要求的锁机制。 

  内部实现是在抢占式线程加上临时锁,但是没有涉及如何去处理线程的重入

1. queue模块的内容

(1)class queue.Queue(maxsize = 0)

  构造一个FIFO队列,maxsize可以限制队列的大小。如果队列的大小达到了队列的上限,就会加锁,直到队列的内容被消费掉。如果maxsize的值小于等于0,那么队列的尺寸就是无限制的

(2)class queue.LifoQueue(maxsize = 0)

  构造一个LIFO队列

(3)class PriorityQueue(maxsize = 0)

  构造一个优先级队列,优先级最低的先出去,优先级最低的一般使用sorted(list(entries))[0]),典型加入的元素是一个元祖(优先级, 数据) 

(4)queue.empty异常

  只有非阻塞的时候,队列为空,取数据才会报异常

(5)queue.Full异常

  只有非阻塞的时候,队列满了,继续放数据才会出现异常

2. 队列对象的方法

(1)Queue.qsize()

  返回queue的近似值

  注意:qsize>0 不保证(get)取元素不阻塞。qsize< maxsize不保证(put)存元素不会阻塞

(2)Queue.empty()

  判断队列是否为空

(3)Queue.full()

  判断是否满了

(4)Queue.put(item, block=True, timeout=None):

  往队列里放数据,如果满了的话,blocking = False 直接报 Full异常;如果blocking = True,就是等一会,timeout必须为 0 或正数。None为一直等下去,0为不等,正数n为等待n秒还不能存入,报Full异常。

(5)Queue.put_nowait(item)

  往队列里存放元素,不等待

(6)Queue.get(item, block=True, timeout=None):

  从队列里取数据,如果为空的话,blocking = False 直接报 empty异常。如果blocking = True,就是等一会,timeout必须为 0 或正数。None为一直等下去,0为不等,正数n为等待n秒还不能读取,报empty异常。

(7)Queue.get_nowait(item)

  从队列里取元素,不等待

  put_nowait和get_nowait两个方法跟踪入队的任务是否被消费者daemon进程完全消费

 (8)Queue.task_done()

  表示队列中某个元素被消费进程或线程使用,消费结束发送信息。

(9)Queue.join()

  一直阻塞直到队列中的所有元素都被取出和执行

3. 简单示例

import threading
from queue import Queue

class ClosableQueue(Queue):
    SENTINEL = object()
    
    def close(self):
        self.put(SENTINEL)
        
    def __iter__(self):
        while True:
            item = self.get()
            try:
                if item is self.SENTINEL:
                    return 
                yield item
            finally:
                self.task_done()
                
class StoppabelWoker(threading.Thread):
    def __init__(self,func,in_queue,out_queue):
        self.func = func
        self.in_queue = in_queue
        self.out_queue = out_queue
    
    def run(self):
        for item in self.in_queue:
            result = self.func(item)
            self.out_queue.put(result)

 

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/120034.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • 下列选项中不符合python语言变量命名_以下变量名中,不符合Python语言变量命名规则的是…[通俗易懂]

    下列选项中不符合python语言变量命名_以下变量名中,不符合Python语言变量命名规则的是…[通俗易懂]摘要:备结械设在机中构可要点设计靠性,下语本出品可高产的根全型路和安是提靠性。名中命名不属标志别划目的品分的类常用于《危险类及化学分项是(。包括品中中不毒、符合措施预防危险污染化学事故控制。…备结械设在机中构可要点设计靠性,下语本出品可高产的根全型路和安是提靠性。》颁布了条例险化学品险化学品许可证管管理经营(第安全依据《危《危理办号令法》,变量不变量品经加强的管营许为了危险理化学可证。名中命名…

    2022年6月11日
    36
  • 浅谈CMS垃圾收集器与G1收集器

    浅谈CMS垃圾收集器与G1收集器1、CMS收集器  CMS收集器是一种以获取最短回收停顿时间为目标的收集器。基于“标记-清除”算法实现,它的运作过程如下:1)初始标记2)并发标记3)重新标记4)并发清除  初始标记、从新标记这两个步骤仍然需要“stop the world”,初始标记仅仅只是标记一下GC Roots能直接关联到的对象,熟读很快,并发标记阶段就是进行GC Roots Tracing,而重新标…

    2022年5月8日
    46
  • 实现PC视频播放最强画质教程( Potplayer播放器+MADVR插件)【转】

    实现PC视频播放最强画质教程( Potplayer播放器+MADVR插件)【转】转自:http://www.hangge.com/blog/cache/detail_1461.html一、MADVR介绍MADVR 是一款超强的视频插件,其配合高清播放软件,可以做到目前 PC 上播放高清视频的最强画质。MADVR 这款视频渲染器比市面上大多数播放器自带的渲染器有着更精确的颜色处理,更高质量的图像缩放缩放、以及更低的颜色错误率。这就使得它所渲染出来的视频在颜色上更…

    2022年9月14日
    2
  • UDP协议抓包分析

    UDP协议抓包分析一、什么是UDPUDP就是一种无连接的协议。该协议用来支撑那些需要在计算机之间传输数据的网络应用,包括网络视频会议系统在内的众多客户/服务器模式的应用。二、UDP协议的特点UDP使用底层的互联网协议来传送报文,同IP一样提供不可靠的无连接传输服务。他也不提供报文到达确认、排序及流量控制等功能。(1)UDP是一个无连接协议,也就是传输数据之前源端口和目标端口不能建立连接。当它想传输时,就简单…

    2022年5月11日
    179
  • 常量和常量表达式_里伯德常量

    常量和常量表达式_里伯德常量常量和常量表达式 long型常量以L或者l结尾,有时候,如果一个整数太大无法用int表达,也被当做long型; 无符号常量以U或者u结尾,unsignedlong型常量以UL或者ul结尾; 没有后缀的浮点数常量为double型; 有后缀F或者f的浮点数常量是float型,后缀L或者l表示longdouble型常量; 八进制和十六进制的常量也可以使用L和U后缀;

    2022年9月29日
    2
  • 损失函数——交叉熵损失函数(CrossEntropy Loss)

    损失函数——交叉熵损失函数(CrossEntropy Loss)损失函数 交叉熵损失函数 CrossEntropy 交叉熵函数为在处理分类问题中常用的一种损失函数 其具体公式为 1 交叉熵损失函数由来交叉熵是信息论中的一个重要概念 主要用于度量两个概率分布间的差异性 首先我们来了解几个概念 1 1 信息量信息论奠基人香农 Shannon 认为 信息是用来消除随机不确定性的东西 也就是说衡量信息量大小就看这个信息消除不确定性的程度 太阳从东方升起了 这条信息没有减少不确定性 因为太阳肯定从东面升起 这是句废话 信息量为 0 六

    2025年6月28日
    3

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号