zoukankan      html  css  js  c++  java
  • 02、Java进阶线程池详解

    线程池

    线程池做的工作主要是控制运行的线程的数量,处理过程中将任务加入队列,然后在线程创建后,启动这些任务,如果线程超过了最大数量,超出的数量的线程排队等候,等其他线程执行完毕,再从队列中取出任务来执行。

    主要特点为:线程的复用、控制最大并发数、管理线程

    1、降低资源消耗:通过重复利用创建的线程,降低线程创建和消耗造成的资源消耗。

    2、提高响应速度,当任务到达时,任务可以不需要等到线程创建就能立即执行。

    3、提高线程的可管理性。线程是稀缺资源,如果无限的创建,不仅会消耗资源,还会降低系统的稳定性,使用线程池可以进行统一分配,调优和监控。

    Java中的线程池是通过Executor框架实现的,该框架中用到了Executor、Executors、ExecutorService、ThreadPoolExecutor这几个类。

    三种编码实现

    线程池的实现方式有五种,java8新推出Executors.newWorkStealingPool(int),使用目前机器上可用的处理器作为他的并行级别,除此之外,最常使用的是以下四种:

    Executors.newFixedThreadPool(int)

    创建一个定长线程池,可控制线程最大并发数,超出的线程会在队列中等待。

    这种方式创建的线程池corePoolSize和maximumPoolSize值是相等的,它使用的是LinkedBlockingQueue。

    public static ExecutorService newFixedThreadPool(int nThreads) {
        return new ThreadPoolExecutor(nThreads, nThreads,
                                      0L, TimeUnit.MILLISECONDS,
                                      new LinkedBlockingQueue<Runnable>());
    }
    

    示例代码如下:

    public class Main {
        public static void main(String[] args) {
            ExecutorService fixedThreadPool = Executors.newFixedThreadPool(3);
            for (int i = 0; i < 10; i++){
                final int index = i;
                fixedThreadPool.execute(new Runnable() {
                    @Override
                    public void run() {
                        System.out.println(index);
                        try {
                            Thread.sleep(2000);
                        } catch (InterruptedException e) {
                            e.printStackTrace();
                        }
                    }
                });
            }
        }
    }
    

    因为线程池大小为3,每个任务输出index后sleep 2秒,所以每两秒打印3个数字。

    指定长线程池的大小最好根据系统资源进行设置。

    Runtime.getRuntime().availableProcessors()
    

    Executors.newSingleThreadExecutor()

    创建一个单线程的线程池,只会用唯一的工作线程来执行任务,保证所有任务按照指定顺序执行。

    这种方式将corePoolSize和maximumPoolSize都设置为1,使用的是LinkedBlockingQueue。

    public static ExecutorService newSingleThreadExecutor() {
        return new FinalizableDelegatedExecutorService(new ThreadPoolExecutor(1, 1,
                                        0L, TimeUnit.MILLISECONDS,
                                        new LinkedBlockingQueue<Runnable>()));
    }
    

    示例代码如下:

    public class Main {
        public static void main(String[] args) {
            ExecutorService singleThreadExecutor = Executors.newSingleThreadExecutor();
            for (int i = 0; i < 10; i++){
                final int index = i;
                singleThreadExecutor.execute(new Runnable() {
                    @Override
                    public void run() {
                        System.out.println(index);
                        try {
                            Thread.sleep(2000);
                        } catch (InterruptedException e) {
                            e.printStackTrace();
                        }
                    }
                });
            }
        }
    }
    

    结果依次输出,相当于顺序执行各个任务。

    Executors.newCachedThreadPool()

    创建一个可缓存线程池,如果线程池长度超过处理需要,可灵活回收空闲线程,若无可回收的,则新建线程。

    这种方式将corePoolSize设置为0,将maximumPoolSize设置为Integer.MAX_VALUE,使用的SynchronousQueue。来了任务就创建线程运行,当线程空闲超过60s,就销毁线程。

    public static ExecutorService newCachedThreadPool() {
        return new ThreadPoolExecutor(0, Integer.MAX_VALUE,
                                     60L, TimeUnit.SECONDS,
                                     new SynchronousQueue<Runnable>());
    }
    

    示例代码如下:

    public class Main {
        public static void main(String[] args) {
            ExecutorService newCachedThreadPool = Executors.newCachedThreadPool();
            for (int i = 0; i < 10; i++) {
                final int index = i;
                try {
                    Thread.sleep(2000);
                }catch (InterruptedException e){
                    e.printStackTrace();
                }
                newCachedThreadPool.execute(new Runnable() {
                    @Override
                    public void run() {
                        System.out.println(index);
                    }
                });
            }
        }
    }
    

    线程池为无限大,当执行第二个任务时第一个任务已经完成,会复用执行第一个任务的线程,而不用每次新建线程。

    Executors.newScheduledThreadPool

    创建一个定长线程池,支持定时及周期性任务执行。

    public static ScheduledExecutorService newScheduledThreadPool(int corePoolSize) {
        return new ScheduledThreadPoolExecutor(corePoolSize);
    }
    

    示例代码如下:

    public class Main {
        public static void main(String[] args) {
            ScheduledExecutorService scheduledThreadPool = Executors.newScheduledThreadPool(5);
            // 表示延迟3秒执行
            scheduledThreadPool.schedule(new Runnable() {
                @Override
                public void run() {
                    System.out.println("delay 3 seconds");
                }
            }, 3, TimeUnit.SECONDS);
    
            // 延迟1秒后每隔3秒执行一次
            scheduledThreadPool.scheduleAtFixedRate(new Runnable() {
                @Override
                public void run() {
                    System.out.println("delay 1 seconds, and executor every 3 seconds");
                }
            }, 1, 3, TimeUnit.SECONDS);
        }
    }
    

    schedule()方法用于延迟的定时任务,scheduleAtFixedRate()是周期性的定时任务。

    七个重要参数

    线程池包含如下七个重要的参数:

    public ThreadPoolExecutor(int corePoolSize,
                              int maximumPoolSize,
                              long keepAliveTime,
                              TimeUnit unit,
                              BlockingQueue<Runnable> workQueue,
                              ThreadFactory threadFactory,
                              RejectedExecutionHandler handler)
    

    corePoolSize:线程池中常驻核心线程数。当线程池的线程数达到corePoolSize后,就会把到达的任务放到缓存队列当中。

    maximumPoolSize:线程池能够容纳同时执行的最大线程数,必须大于等于1,

    keepAliveTime:多余的空闲线程的存活时间,当前线程池数量超过corePoolSize时,档口空闲时间达到

    keepAliveTime值时,多余空闲线程会被销毁,直到只剩下corePoolSize个线程为止。

    unit:keepAliveTime的单位。

    workQueue:任务队列,被提交但尚未被执行的任务。

    threadFactory:表示生成线程池中工作线程的线程工厂,用于创建线程一般用默认的即可。

    handler:拒绝策略,表示当队列满了,并且工作线程大于等于线程池的最大线程数(maximumPoolSize)时,如何来拒绝请求执行的runable的策略。

    四种拒绝策略

    当等待队列满时,且达到最大线程数,再有新任务到来,就需要启动拒绝策略。JDK提供了四种拒绝策略:

    AbortPolicy(默认):直接抛出RejectedExecutionException异常,阻止系统正常运行。

    CallerRunsPolicy:不会抛弃任务,也不会抛出异常,而是将某些任务回退到调用者,来降低流量。

    DiscardOldestPolicy:抛弃队列中等待最久的任务,然后把当前任务加入队列中尝试再次提交当前任务。

    DiscardPolicy:直接丢弃任务,不予任何处理也不抛异常。

    以上四种拒绝策略,均实现了RejectedExecutionHandler接口。

    自定义线程池

    在实际的开发过程中,一般都是设置七个参数来自定义线程池操作。

    示例代码如下:

    public class Main {
        public static void main(String[] args) {
            ExecutorService executorService = new ThreadPoolExecutor(3, 5, 1l,
                    TimeUnit.SECONDS,
                    new LinkedBlockingQueue<>(3),
                    Executors.defaultThreadFactory(),
                    new ThreadPoolExecutor.DiscardPolicy());
            try {
                for (int i = 0; i < 10; i++) {
                    executorService.execute(new Runnable() {
                        @Override
                        public void run() {
                            // 运行会保持8个任务,多余的会丢失,依靠拒绝策略来断定
                            System.out.println(Thread.currentThread().getName() + "\t办理业务");
                        }
                    });
                }
    
            }catch (Exception e){
                e.printStackTrace();
            }finally {
                executorService.shutdown();
            }
        }
    }
    

    合理配置参数

    CPU密集型

    CPU密集的意思是该任务需要大量的运算,而没有阻塞,CPU一直全速运行,这种类型的任务只有在真正多核CPU上才可能得到加速(通过多线程),而在单核CPU上,无论你开几个模拟的多线程该任务都不可能得到加速,因为CPU总的运算能力就那些。

    CPU密集型任务配置尽可能少的线程数量,参考公式:

    线程池的线程数 = CPU核数+1

    IO密集型

    IO密集型任务线程并不是一直在执行任务,则应配置经可能多的线程,如

    IO密集型,即该任务需要大量的IO,即大量的阻塞。在单线程上运行IO密集型的任务会导致浪费大量的 CPU运算能力浪费在等待。
    所以在IO密集型任务中使用多线程可以大大的加速程序运行,即使在单核CPU上,这种加速主要就是利用了被浪费掉的阻塞时间。
    IO密集型时,大部分线程都阻塞,故需要多配置线程数

    参考公式1:

    线程池的线程数 = CPU核数 * 2

    参考公式2:

    线程池的线程数 = CPU核数 /(1-阻塞系数)
    阻塞系数在0.8~0.9之间
    例如八核CPU的线程数 = 8 / (1-0.9) = 80

  • 相关阅读:
    java反射机制
    java的hashmap与hashtable说明,简单易理解
    awk
    python的w+到底是什么
    hive深入浅出
    【OpenCV新手教程之十五】水漫金山:OpenCV漫水填充算法(Floodfill)
    对你相同重要的非技术贴,10件事证明你跟错了人
    SVM中为何间隔边界的值为正负1
    pushlet服务端推送——多播
    谁洗碗,搭载我的技术目标,起航。
  • 原文地址:https://www.cnblogs.com/pengjingya/p/14925165.html
Copyright © 2011-2022 走看看