【PYTHON模块】:协程与greenl

发布时间:2019-06-28 17:40:52编辑:auto阅读(1273)

    协程:又称为微线程,英文名称Coroutine。

    作用:它拥有自己的寄存器上下文和栈,能保留上一次调用时的状态,可以随时暂停程序,随时切换回来。

    优点:

        •无需线程上下文切换的开销
        •无需原子操作锁定及同步的开销  

        •方便切换控制流,简化编程模型
        •高并发+高扩展性+低成本:一个CPU支持上万的协程都不是问题。所以很适合用于高并发处理

    缺点:
        •无法利用多核资源:协程的本质是个单线程,它不能同时将 单个CPU 的多个核用上,协程需要和进程配合才能运行在多CPU上
        •进行阻塞(Blocking)操作(如IO时)会阻塞掉整个程序

     


    • 使用yield实现协程:

    def g(name):
     print("starting product ....")
     while True:
      baozi= yield  # 程序暂停等待next
      print("{} is eating {}...".format(name,baozi))
    def p():
     conn.__next__()  # 实例conn启动yield
     conn2.__next__() # 实例conn2启动yield
     i = 0
     while i<5:
      i += 1
      print("product: {}".format(i))  
      conn.send(i) # 向yield发送数据,yield恢复,并自动执行next
      conn2.send(i) # 向yield发送数据,yield恢复,并自动执行next
    
    conn = g("laoda")  # 创建实例conn
    conn2 = g("laoer")      # 创建实例conn2
    product = p()   # 启动函数p

     



     

    • 使用greenlet实现协程:不是python自带模块,需要安装

            创建协程对象的方法其实有两个参数”greenlet(run=None, parent=None)”。参数”run”就是其要调用的方法,比如上例中的函数test1()和test2();参数”parent”定义了该协程对象的父协程,也就是说,greenlet协程之间是可以有父子关系的。如果不设或设为空,则其父协程就是程序默认的”main”主协程。

    from greenlet import greenlet
    def test1():
        print(1)
        t2.switch()    # 函数暂停,切换到t2
        print(2)
    
    def test2():
        print(3)
        t1.switch()    # 函数暂停,切换到t1
        print(4)
       
    t1=greenlet(test1)    # test1生成greenlet对象
    t2=greenlet(test2)    # test2生成greenlet对象
    t1.switch()



    • 使用gevent实现协程:第三方库,需要安装

    实现了异步I/O,操作

    方法
    参数
    作用
    示例
    spawn(func,func_args)

    func:加入gevent的函数名

    func_args:函数参数

    把函数,创建协程实例

    joinall[spawn_list]
    spawn_list:spawn方法列表

    把创建的协程实例添加到异步列表

    等待列表中的所有实例执行完毕


    sleep(time)
    time:时间(秒)
    交出CPU控制权,时间为秒

    getcurrent()
    获取当前协程内存地址
    from gevent import gevent
    import random
    def creat(num):
     wait_time = random.Randomint(0,num)
     gevent.sleep(wait_time)
     print("{} wait done!".format(gevent.getcrrent()))
     
    gevent_list = []
    for i in range(20):
     gevent_list.append(gevent.spawn(creat, i))
    gevent.joinall(gevent_list)
    
    
    #Socket并发:(未测试)
    import gevent
    import socket
    class server(object):
     def __int__(self,ip,port,*args):
      self.server_in = socket.socket()
      self.server_in.bind(ip,port)
      self.server_in.listen(100)
      # self.spawn_list = []
      
     def run(self):
      client_spawn = []
      while True:
       conn,addr = self.server_in.accept()
       client_spawn.append(gevent.spawn(handler,conn))
      gevent.joinall(client_spawn)
      
      
     def handler(self,conn):
      while True:
       recv_data = conn.recv(1024)
       if recv_data = 'exit':
        conn.shutdown(socket.SHUT_WR)
        break
       print("recv:".format(recv_data))
       conn.send(recv_data.upper())

     

    http://python.jobbole.com/86481/

     

    协程详解

关键字