进程浅析

from multiprocessing import Pipe,Process

def fun(conn):
    conn.send([12,{'hello':'c'},'python'])
    data=conn.recv()
    conn.close()
    print(id(conn),data)


if __name__=='__main__':

    parent_conn,child_conn=Pipe() #获取一个管道对象
    p=Process(target=fun,args=(child_conn,))   #创建一个进程对象 导包也得是大写
    p.start()

    print(parent_conn.recv(),id(parent_conn))
    parent_conn.send('儿子你好')
    p.join()

 >>>>>>>>>>>>>>>>>>>>>>>>>>>>管道对象处理进程数据的收发

import multiprocessing
def show(num,l):
    # with l:  #如果用with则默认写锁名就上锁
        l.acquire()  #启动锁
        print('hello python process %s'%num)
        l.release()  #释放锁

if __name__=='__main__':
    lock=multiprocessing.Lock() #创建一个进程同步锁
    for i in range(10):
        p=multiprocessing.Process(target=show,args=(i,lock)).start()  #生成并启动十个进程对象

>>>>>>>>>>>>>>>>>同步锁实现进程的同步  为了避免同一时刻争抢资源造成数据紊乱

>>>>>>>>>>>>>>>>>进程数据的共享使用manager来实现

import os
import multiprocessing
import time
def show(num):
    time.sleep(1)
    print(num,os.getpid())
    return 'hello python{0}'.format(num)

def ret(arg): #必须有一个参数
    print(arg,os.getpid()) #回掉函数此时显示的arg 就是之前被执行函数的返回值    return 'hello python{0}'.format(num)


if __name__=='__main__':
    pool=multiprocessing.Pool(5)  #创建的线程池数量
    for i in range(100):
        pool.apply_async(func=show,args=(i,),callback=ret)  #进程异步使用  回调函数使用的是主进程

    pool.close()  #关闭进程
    pool.join()   #进程池执行完再执行主进程

    print('process the end')

>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>回调函数是依附于主线程执行的 主要用于写日志

随意切换进程运行可以使用greenlet模块下的g.switch方法 也是作为启动的

import greenlet
def t1():
    print(125)
    gr1.switch()
    print('abc')

def t2():
    print('hahaha')
    gr2.switch()
    print('python')
    gr2.switch()
    
gr1=greenlet.greenlet(t2)  #调t2
gr2=greenlet.greenlet(t1)  #调t1

gr1.switch()  #启动

>>>>>>>>>>>>>>>>>>>通过协程的方法来实现进程效率的提升

import requests,time
import gevent
start=time.time()
def f(url):
    print('GET: %s' % url)
    resp = requests.get(url)
    data = resp.text
    print(len(data))


gevent.joinall([
    gevent.spawn(f, 'https://www.python.org/'),
    gevent.spawn(f, 'https://www.yahoo.com/'),
    gevent.spawn(f, 'https://github.com/'),
])

print(time.time()-start)