本节内容
1、Gevent 协程
2、Select/poll/Epoll异步IO与事件驱动
3、RabbitMQ队列
一、 协程
1.1 协程概念
协程,又称微线程,英文名Coroutine,一句话说明什么是协程:协程是一种用户态的轻量级线程。
协程拥有自己的寄存器上下文和栈,协程调度切换时,将寄存器上下文和栈保存到其他地方,在切回来的时候,恢复先前保存的寄存器上下文和栈。因此:
协程能保留上一次调用时的状态(即所有局部状态的一个特定组合),每次过程重入时,就相当于进入上一次调用的状态,换种说法:进入上一次离开时所处逻辑流的位置。
1.2 协程的优点
无需线程上下文切换的开销。
无需原子操作锁定及同步的开销。
原子操作:原子操作(atomic operation)是不需要synchronized,所谓原子操作是指不会被线程调度机制打断的操作;这种操作一旦开始,就一直运行到结束,中间不会有任何context switch(切换到另一个线程)。原子操作可以是一个步骤,也可以是多个操作步骤,但是其顺序不可以被打乱,或者切割掉只执行的部分,视作整体是原子性的核心。
方便切换控制流,简化编程模型。
高并发+高扩展性+低成本:一个CPU支持上万的协程都不是问题,所以很适合用于高并发处理。
1.3 协程的缺点
无法利用多核资源:协程的本质是个单线程,它不能同时将单个CPU的多个核用上,协程需要和进程配合才能运行多CPU上,当然我们日常所编写的绝大部分应用都没有这个必要,除非是CPU密集型应用。
进行阻塞(blocking)操作(如IO时)会阻塞掉整个程序。
1.4 实现协程实例
1.4.1 使用yield实现协程操作例子
import time,queue def consumer(name): print('---->starting eating baozi....') while 1: new_baozi=yield print("[%s] is eating baozi %s"%(name,new_baozi)) def producer(): r=con.__next__() r=con2.__next__() n=0 while n <5: n +=1 con.send(n) con2.send(n) print("