zoukankan      html  css  js  c++  java
  • Day 39 管道 、数据共享与地址池

    参考张磊同学的博客 

    http://www.cnblogs.com/chongdongxiaoyu/p/8658379.html

    一、管道

    #创建管道的类:
    Pipe([duplex]):在进程之间创建一条管道,并返回元组(conn1,conn2),其中conn1,conn2表示管道两端的连接对象,强调一点:必须在产生Process对象之前产生管道
    #参数介绍:
    dumplex:默认管道是全双工的,如果将duplex射成False,conn1只能用于接收,conn2只能用于发送。
    #主要方法:
        conn1.recv():接收conn2.send(obj)发送的对象。如果没有消息可接收,recv方法会一直阻塞。如果连接的另外一端已经关闭,那么recv方法会抛出EOFError。
        conn1.send(obj):通过连接发送对象。obj是与序列化兼容的任意对象
     #其他方法:
    conn1.close():关闭连接。如果conn1被垃圾回收,将自动调用此方法
    conn1.fileno():返回连接使用的整数文件描述符
    conn1.poll([timeout]):如果连接上的数据可用,返回True。timeout指定等待的最长时限。如果省略此参数,方法将立即返回结果。如果将timeout射成None,操作将无限期地等待数据到达。
     
    conn1.recv_bytes([maxlength]):接收c.send_bytes()方法发送的一条完整的字节消息。maxlength指定要接收的最大字节数。如果进入的消息,超过了这个最大值,将引发IOError异常,并且在连接上无法进行进一步读取。如果连接的另外一端已经关闭,再也不存在任何数据,将引发EOFError异常。
    conn.send_bytes(buffer [, offset [, size]]):通过连接发送字节数据缓冲区,buffer是支持缓冲区接口的任意对象,offset是缓冲区中的字节偏移量,而size是要发送字节数。结果数据以单条消息的形式发出,然后调用c.recv_bytes()函数进行接收    
     
    conn1.recv_bytes_into(buffer [, offset]):接收一条完整的字节消息,并把它保存在buffer对象中,该对象支持可写入的缓冲区接口(即bytearray对象或类似的对象)。offset指定缓冲区中放置消息处的字节位移。返回值是收到的字节数。如果消息长度大于可用的缓冲区空间,将引发BufferTooShort异常。
    from multiprocessing import Process, Pipe#引入进程模块和管道模块
    
    def f(conn):#定义一个函数
        conn.send("Hello The_Third_Wave")#发送一条信息
        conn.close()#关闭这个进程
    
    if __name__ == '__main__':#如果名字等于当前名称
        parent_conn, child_conn = Pipe()#接收两个参数
        p = Process(target=f, args=(child_conn,))#创建一个进程
        p.start()#启动进程
        print(parent_conn.recv())#接收一个信息
        p.join()#等待进程结束

    管道实现消费者生成者模型 

    # from multiprocessing import Lock,Pipe,Process
    # def producer(con,pro,name,food):
    #     con.close()
    #     for i in range(100):
    #         f = '%s生产%s%s'%(name,food,i)
    #         print(f)
    #         pro.send(f)
    #     pro.send(None)
    #     pro.send(None)
    #     pro.send(None)
    #     pro.close()
    #
    # def consumer(con,pro,name,lock):
    #     pro.close()
    #     while True:
    #             lock.acquire()
    #             food = con.recv()
    #             lock.release()
    #             if food is None:
    #                 con.close()
    #                 break
    #             print('%s吃了%s' % (name, food))
    # if __name__ == '__main__':
    #     con,pro = Pipe()
    #     lock= Lock()
    #     p = Process(target=producer,args=(con,pro,'egon','泔水'))
    #     c1 = Process(target=consumer, args=(con, pro, 'alex',lock))
    #     c2 = Process(target=consumer, args=(con, pro, 'bossjin',lock))
    #     c3 = Process(target=consumer, args=(con, pro, 'wusir',lock))
    #     c1.start()
    #     c2.start()
    #     c3.start()
    #     p.start()
    #     con.close()
    #     pro.close()
    
    # from multiprocessing import Process,Pipe,Lock
    #
    # def consumer(produce, consume,name,lock):
    #     produce.close()
    #     while True:
    #         lock.acquire()
    #         baozi=consume.recv()
    #         lock.release()
    #         if baozi:
    #             print('%s 收到包子:%s' %(name,baozi))
    #         else:
    #             consume.close()
    #             break
    #
    # def producer(produce, consume,n):
    #     consume.close()
    #     for i in range(n):
    #         produce.send(i)
    #     produce.send(None)
    #     produce.send(None)
    #     produce.close()
    #
    # if __name__ == '__main__':
    #     produce,consume=Pipe()
    #     lock = Lock()
    #     c1=Process(target=consumer,args=(produce,consume,'c1',lock))
    #     c2=Process(target=consumer,args=(produce,consume,'c2',lock))
    #     p1=Process(target=producer,args=(produce,consume,30))
    #     c1.start()
    #     c2.start()
    #     p1.start()
    #     produce.close()
    #     consume.close()
    
    # pipe 数据不安全性
    # IPC
    # 加锁来控制操作管道的行为 来避免进程之间争抢数据造成的数据不安全现象
    
    # 队列 进程之间数据安全的
    # 管道 + 锁
  • 相关阅读:
    linux 安装 svn
    人群计数:Single-Image Crowd Counting via Multi-Column Convolutional Neural Network
    Ubuntu查看CPU占用和使用情况
    看完这篇文章,我奶奶都懂了HTTPS原理
    EfficientNet算法笔记
    Soft NMS算法笔记
    DenseNet算法详解
    AI竞赛服务平台—— FlyAI
    Cornernet训练自己的数据
    深度学习物体检测:CornerNet
  • 原文地址:https://www.cnblogs.com/mengbin0546/p/8665598.html
Copyright © 2011-2022 走看看