zoukankan      html  css  js  c++  java
  • Python multiprocessing模块的Pool类来代表进程池对象

    #-*-coding:utf-8-*-
    '''multiprocessing模块提供了一个Pool类来代表进程池对象
        1、Pool可以提供指定数量的进程供用户调用,默认大小是CPU的核心数;
        2、当有新的请求提交到Pool中,如果池还没有满,name就会创建一个新的进程用来执行改请求;
        3、但如果池中的进程数已经达到规定最大值,那么该请求就会等待池中有进程结束,才会创建新的进程。
    '''
    from multiprocessing import Pool
    import os,time,random
    def run_task(name):
        print("任务:%s(%s)运行..."%(name,os.getpid()))
        time.sleep(random.random()*3)
        print("任务:%s 结束!"%name)
    if __name__=="__main__":
        print("当前进程ID: %s" %os.getpid())
        p=Pool(processes=3)
        for i in range(5):
            p.apply_async(run_task,args=(i,))
            print("等待所有进程结束。")
            p.close()
            p.join()
            print("所有进程结束")
    '''Pool对象调用join()方法会等待所有子进程执行完毕,调用join()之前
    必须先调用close(),调用close()之后就不能继续添加新的Process了''
    

    摘自《Python爬虫开发与项目实战》

  • 相关阅读:
    Python 双向链表的实现
    Python 单链表实现
    分享两种 Python 中的单例模式
    HTML 盒子模型
    HTML 行高
    HTML 超链接 文本修饰 背景属性
    HTML 标签分类
    HTML 文字,样式表
    HTML CSS
    HTML 锚点 空链 超链优化写法
  • 原文地址:https://www.cnblogs.com/bin-l/p/8532176.html
Copyright © 2011-2022 走看看