Python 中生产者与消费者模型

在并发编程中使用生产者和消费者模式能够解决绝大多数并发问题。

该模式通过平衡生产进程和消费进程的工作能力提高程序的整体处理数据的速度

举个应用栗子:

全栈开发时候,前端接收客户请求,后端处理请求逻辑。

当某时刻客户请求过于多的时候,后端处理不过来,

此时完全可以借助队列来辅助,将客户请求放入队列中,

后端逻辑代码处理完一批客户请求后马上从队列中继续获取,

这样平衡两端的效率。

为什么要使用生产者和消费者模式

在进程世界里,生产者就是生产数据的进程,消费者就是消费数据的进程。

在多进程开发当中,如果生产者处理速度很快,而消费者处理速度很慢,那么生产者就必须等待消费者处理完,才能继续生产数据。

同样的道理,如果消费者的处理能力大于生产者,那么消费者就必须等待生产者。

为了解决这个问题于是引入了生产者和消费者模式。

什么是生产者消费者模式

生产者消费者模式是通过一个容器来解决生产者和消费者的强耦合问题。

生产者和消费者彼此之间不直接通讯,而通过阻塞队列来进行通讯,

所以生产者生产完数据之后不用等待消费者处理,直接扔给阻塞队列,

消费者不找生产者要数据,而是直接从阻塞队列里取,

阻塞队列就相当于一个缓冲区,平衡了生产者和消费者的处理能力。

阻塞队列的应用实例:


参考https://zhuanlan.zhihu.com/p/100848228

你可能感兴趣的:(Python 中生产者与消费者模型)