Python实现生产者消费者模型的两种核心方式解析

苏见山
苏见山
发布时间:2026-10-13 | 5人浏览过
原创

本文详细解析Python中实现生产者消费者模型的两种主流方式。第一种基于queue模块结合多线程,通过队列缓冲解决同步问题;第二种利用yield关键字构建生成器(协程),实现轻量级的并行处理。文章提供完整代码示例,对比两种模式的适用场景与实现细节,帮助开发者根据实际需求选择最优方案。

第一种实现方式基于queue模块结合多线程机制。该方案通过引入队列作为缓冲区,有效协调生产者和消费者的执行速度差异,确保数据传递的安全性与有序性。

#生产者消费者模型 其实服务器集群就是这个模型
# 这里介绍的是非yield方法实现过程

import threading,time
import queue
q = queue.Queue(maxsize=10)

def Producer(anme):
 # for i in range(10):
 #  q.put('骨头%s'%i)
 count = 1
 while True:
  q.put('骨头%s'%count)
  print('生产了骨头',count)
  count += 1
  time.sleep(1)

def Consumer(name):
 # while q.qsize() >0:
 while True:
  print('[%s] 取到[%s] 并且吃了它...'%(name,q.get()))
  time.sleep(1)

p = threading.Thread(target=Producer,args=('shenchanzhe',))
c = threading.Thread(target=Consumer,args=('xiaofeizhe01',))
c1 = threading.Thread(target=Consumer,args=('xiaofeizhe02',))

p.start()
c.start()
c1.start()

第二种实现方式利用yield关键字构建生成器(即协程)。这种方式将生产与消费逻辑封装在生成器函数中,通过send和next方法交互,实现一种轻量级的并行处理模型,无需创建额外的线程对象。

#生产者和消费者,使用生成器的方式,就是一个简单的并行,
import time
# 这是一个消费者 一直在等待完成吃包子的动作
def consumer(name):
 print('%s准备吃包子了!'%name) #打印出对应的消费者的名字
 while True: #执行一个死循环 实际上就是需要调用时才会执行,没有调用就会停止在yield
  baozi = yield #在它就收到内容的时候后就把内容传给baozi
  print('包子【%s】来了,被【%s】吃了'%(baozi,name))
def producer(name):
 c1 = consumer('A') #它只是把c1变成一个生成器
 c2 = consumer('B')
 c1.__next__() #第一个next只是会走到yield然后停止
 c2.__next__()
 print('老子开始做包子了')
 for i in range(1,10):
  time.sleep(1)
  print('三秒做了两个包子')
  c1.send(i) #这一步其实就是调用next方法的同时传一个参数i给field接收,然后baozi=i
  c2.send(i+1)
  #其实这里是这样的,在send的时候只是继续执行yield下面的语句,然后去去yield,再次停在这儿

# producer('aea')
c = consumer('aaa') #没next一次就会将程序执行一次
c.__next__()
c.__next__()
c.__next__()

以上两种Python实现生产者消费者模型的方法各有优劣,读者可根据具体业务场景选择合适方案。希望本文内容能为您提供参考,欢迎继续支持本站获取更多技术分享。

相关标签:

本站声明

本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。

Python 相关产品和应用

全部下载

专题列表