zoukankan      html  css  js  c++  java
  • 第十五章、python中的进程操作-开启多进程

    第十五章、python中的进程操作-开启多进程

    一、multprocess模块

    multiprocess不是一个模块而是python中一个操作、管理进程的包。 在这个包中几乎包含了和进程有关的所有子模块,将这部分大致分为四个部分:创建进程部分,进程同步部分,进程池部分,进程之间数据共享。

    二、multprocess.process模块

    Process类中的参数有如下

    group=None, target=None, name=None, args=(), kwargs={}
    ----------------------------------------------------------
    eg:p = Process(target=foo)#实例化出p子进程对象
    

    强调:

    1. 需要使用关键字的方式来指定参数
    2. args指定的为传给target函数的位置参数,是一个元组形式,必须有逗号

    参数介绍:

    • group参数未使用,值始终为None
    • target表示调用对象,即子进程要执行的任务
    • args表示调用对象的位置参数元组,args=(1,2,'egon',)
    • kwargs表示调用对象的字典,kwargs={'name':'egon','age':18}
    • name为子进程的名称

    三、Process()对象方法介绍

    • p.start():启动进程,并调用该子进程中的p.run()

    • p.run():进程启动时运行的方法,正是它去调用target指定的函数,我们自定义类的类中一定要实现该方法

    • p.terminate():强制终止进程p,不会进行任何清理操作,如果p创建了子进程,该子进程就成了僵尸进程,使用该方法需要特别小心这种情况。如果p还保存了一个锁那么也将不会被释放,进而导致死锁

    • p.is_alive():如果p仍然运行,返回True

      from  multiprocessing import Process,current_process
      import time
      def foo():
          print('进程 start')
          time.sleep(2)
          print('进程 end')
      if __name__ == '__main__':
          p = Process(target=foo)
          p.start()
          print(p.is_alive()) # True#打印与子进程同时进行
          time.sleep(5)#在五秒内的第三秒进程就已经结束了
          print(p.is_alive()) # 代码运行完了就算死了 False
          print('主')
      
    • p.join([timeout]):主线程等待p终止(强调:是主线程处于等的状态,而p是处于运行的状态)。timeout是可选的超时时间,需要强调的是,p.join只能join住start开启的进程,而不能join住run开启的进程

      from multiprocessing import Process
      import time
      def foo():
          print('进程  start ')
          time.sleep(2.3)
          print('进程  end ')
      
      if __name__ == '__main__':
          p = Process(target=foo)
          p.start() #
          # 核心需求就是
          # time.sleep(5)
          p.join() # 阻塞住主进程再等待子进程结束,然后再往下执行,(了解的是:内部会待用wait())
          print('主')
      

    四、Process()对象属性介绍

    • p.daemon:默认值为False,如果设为True,代表p为后台运行的守护进程,当p的父进程终止时,p也随之终止,并且设定为True后,p不能创建自己的新进程,必须在p.start()之前设置
    • p.name:进程的名称
    • p.pid:进程的pid

    五、使用process模块创建进程

    import time
    from multiprocessing import Process
    
    def f(name):
        print('hello', name)
        print('我是子进程')
    
    if __name__ == '__main__':
        p = Process(target=f, args=('bob',))
        p.start()
        time.sleep(1)
        print('执行主进程的内容了'
    

    六、进程之间的数据隔离问题

    from multiprocessing import Process
    import time
    
    x = 0
    def task():
        global x
        x = 100
        print('子进程的x修改为了{}'.format(x))
    
    if __name__ == '__main__':
        p = Process(target=task)
        p.start()
        time.sleep(5)
        print(x) 
    
    

    七、守护进程

    守护进程会随着主进程的结束而结束。

    由主进程创建守护进程

      其一:守护进程会在主进程代码执行结束后就终止

      其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes are not allowed to have children

    from multiprocessing import Process
    import time
    def foo():
        print('守护进程 start')
        time.sleep(5)
        print('守护进程 end')
        p = Process(target=foo)#第三秒的时候主进程结束了没执行到这一步,不报错
        p.start()
    
    if __name__ == '__main__':
        p = Process(target=foo)
        p.daemon =True  # 把这个子进程定义为了守护进程,
        p.start()
        time.sleep(2)#子进程还没有结束,主进程结束了强制子进程提前结束
        print('主')
    
    from multiprocessing import Process
    import time
    def foo():
        print('守护进程 start')
        time.sleep(2)
        print('守护进程 end')
        p = Process(target=foo)
        p.start()
    
    
    
    if __name__ == '__main__':
        p = Process(target=foo)
        p.daemon =True  # 把这个子进程定义为了守护进程
        p.start()
        time.sleep(3)
        print('主')
    ------------------------------------------------------
    #报错:AssertionError: daemonic processes are not allowed to have children
    

    八、terminate方法

    from  multiprocessing import Process,current_process
    import time
    def foo():
        print('进程 start')
        # print('---------------------    ',current_process().name)
        time.sleep(50)
        print('进程 end')
    
    
    if __name__ == '__main__':
        p = Process(target=foo)
        p.start()
        time.sleep(0.45)#start比terminate慢大约0.45秒
        p.terminate() # 给操作系统发了一个立即终止请求
        print(p.is_alive()) # True
        p.join()
        print(p.is_alive()) # False
        print('主')
    -------------------------------------------------
    进程 start
    True
    False
    主
    

    九、pid和name属性

    
    class Myprocess(Process):
        def __init__(self,person):
            self.name=person   # name属性是Process中的属性,标示进程的名字
            super().__init__()  # 执行父类的初始化方法会覆盖name属性
            # self.name = person  # 在这里设置就可以修改进程名字了
            # self.person = person  # 如果不想覆盖进程名,就修改属性名称就可以了
        def run(self):
            print('%s正在和网红脸聊天' %self.name)
            # print('%s正在和网红脸聊天' %self.person)
            time.sleep(random.randrange(1,5))
            print('%s正在和网红脸聊天' %self.name)
            # print('%s正在和网红脸聊天' %self.person)
    
    
    p1=Myprocess('哪吒')
    p1.start()
    print(p1.pid)    #可以查看子进程的进程id
    
  • 相关阅读:
    servlet中如何实现通过Spring实现对象的注入
    异步Socket
    JAVA NIO实现
    【Java并发】
    JAVA实现阻塞队列
    lock与synchronized比较
    线程执行顺序
    ConcurrentHashMap 1.8
    LeetCode 416 分割等和子集
    linux常用指令
  • 原文地址:https://www.cnblogs.com/demiao/p/11519446.html
Copyright © 2011-2022 走看看