zoukankan      html  css  js  c++  java
  • 【python小随笔】进程池 multiprocessing.Pool的简单实现与踩过的坑

    #导入进程模块
    import multiprocessing
    
    #创建进程池             坑:一定要在循环外面创建进程池,不然会一直创建
    pool = multiprocessing.Pool(30)
    for Size in Size_list:
       
        index,Size_Asin = Size.xpath('./@value')[0].split(",")              
        Size_Asin_url = "https://www.amazon.cn/dp/%sth=1&psc=1" % Size_Asin  # 拼接每个Size_Asin网页URL
                    
    
        #任务进程池执行     坑:这一步要在循环里面执行
         pool.apply_async(self.Size_Asin_Get,args=(Size_Asin_url,parentAsin,))
    
    
    pool.close()         #坑: 要在循环外面关闭
    pool.join()

     少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页

  • 相关阅读:
    Docker 部署 ELK 收集 Nginx 日志
    编译安装python3事出错:
    Linux 系统中部署 LNMP 高可用负载均衡架构集群实现动态博客
    [转载]oracle调用JAVA授权问题
    [转载]浏览器跨域
    [转载]ftp和http区别
    [转载]oracle xml操作
    [转载]Oracle中TO_NUMBER()函数的用法
    [转载]桥接与NAT
    [转载]Oracle中动态SQL详解
  • 原文地址:https://www.cnblogs.com/wanghong1994/p/11777442.html
Copyright © 2011-2022 走看看