Python多线程队列通信详解

Python Queue模块提供线程安全队列，内置锁机制，支持FIFO/LIFO/优先级三种类型，具备阻塞、超时、task_done与join同步机制，适用于生产者-消费者模型。

Python 的 Queue 模块提供了线程安全的队列实现，是多线程编程中进行线程间通信最常用、最可靠的方式之一。它底层自动处理锁机制，避免手动加锁出错，适合生产者-消费者模型。

Queue 的核心特点与适用场景

线程安全：所有操作（put()、get()、qsize() 等）内部已加锁，多个线程可并发调用无需额外同步。
阻塞与超时控制：支持阻塞式读写（默认），也支持设定超时时间，防止无限等待。
三种常用类型：FIFO（queue.Queue）、LIFO（queue.LifoQueue）、优先级队列（queue.PriorityQueue），默认为先进先出。

基本用法：启动生产者与消费者线程

以下是一个典型示例，模拟一个生产者往队列放数据、多个消费者从队列取数据并处理：

（注意：实际使用中建议配合 threading.Event 或 queue.Empty 异常处理来优雅退出）

• 创建队列：q = queue.Queue(maxsize=0)（maxsize=0 表示无限制）
• 生产者调用 q.put(item)，若队列满且未设超时，会阻塞；可加 timeout=2 避免死等
• 消费者调用 q.get()，若队列空，默认阻塞；建议搭配 q.task_done() 和 q.join() 实现任务完成同步
• 每次 get() 后应尽快调用 q.task_done()，表示该任务已处理完毕
• 主线程中调用 q.join() 会阻塞，直到队列中所有任务都调用了 task_done()

避免常见陷阱

不要依赖 qsize() 判断是否为空：在多线程下该值可能瞬间失效，正确做法是捕获 queue.Empty 异常。
避免忘记 task_done()：否则 q.join() 将永远阻塞。
慎用 q.empty() 和 q.full()：它们只是快照，无法保证后续操作的原子性。
对象序列化不是问题，但要注意引用共享：放入队列的是对象引用，若多个线程修改同一可变对象，仍需额外同步。

配合守护线程实现简洁结构

将消费者设为守护线程（daemon=True），主线程结束时自动退出，适用于后台持续处理任务的场景。但要注意：守护线程不会等待未完成的任务，所以更推荐用 q.join() 显式等待任务结束。