前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >【死磕Java并发】-----J.U.C之线程池:ThreadPoolExecutor

【死磕Java并发】-----J.U.C之线程池:ThreadPoolExecutor

作者头像
用户1655470
发布2018-04-26 16:48:48
8170
发布2018-04-26 16:48:48
举报
文章被收录于专栏:chenssy
原文出处http://cmsblogs.com/ 『chenssy

作为Executor框架中最核心的类,ThreadPoolExecutor代表着鼎鼎大名的线程池,它给了我们足够的理由来弄清楚它。

下面我们就通过源码来一步一步弄清楚它。

内部状态

线程有五种状态:新建,就绪,运行,阻塞,死亡,线程池同样有五种状态:Running, SHUTDOWN, STOP, TIDYING, TERMINATED。

代码语言:javascript
复制
private final AtomicInteger ctl = new AtomicInteger(ctlOf(RUNNING, 0));
 private static final int COUNT_BITS = Integer.SIZE - 3;
 private static final int CAPACITY   = (1 << COUNT_BITS) - 1;
 // runState is stored in the high-order bits
 private static final int RUNNING    = -1 << COUNT_BITS;
 private static final int SHUTDOWN   = 0 << COUNT_BITS;
 private static final int STOP       = 1 << COUNT_BITS;
 private static final int TIDYING    = 2 << COUNT_BITS;
 private static final int TERMINATED = 3 << COUNT_BITS;
 // Packing and unpacking ctl
 private static int runStateOf(int c) { return c & ~CAPACITY; }
 private static int workerCountOf(int c) { return c & CAPACITY; }
 private static int ctlOf(int rs, int wc) { return rs | wc; }

变量ctl定义为AtomicInteger ,其功能非常强大,记录了“线程池中的任务数量”和“线程池的状态”两个信息。共32位,其中高3位表示"线程池状态",低29位表示"线程池中的任务数量"。

代码语言:javascript
复制
RUNNING            -- 对应的高3位值是111。
SHUTDOWN       -- 对应的高3位值是000。
STOP                   -- 对应的高3位值是001。
TIDYING              -- 对应的高3位值是010。
TERMINATED     -- 对应的高3位值是011。

RUNNING:处于RUNNING状态的线程池能够接受新任务,以及对新添加的任务进行处理。

SHUTDOWN:处于SHUTDOWN状态的线程池不可以接受新任务,但是可以对已添加的任务进行处理。

STOP:处于STOP状态的线程池不接收新任务,不处理已添加的任务,并且会中断正在处理的任务。

TIDYING:当所有的任务已终止,ctl记录的"任务数量"为0,线程池会变为TIDYING状态。当线程池变为TIDYING状态时,会执行钩子函数terminated()。terminated()在ThreadPoolExecutor类中是空的,若用户想在线程池变为TIDYING时,进行相应的处理;可以通过重载terminated()函数来实现。

TERMINATED:线程池彻底终止的状态。

各个状态的转换如下:

创建线程池

我们可以通过ThreadPoolExecutor构造函数来创建一个线程池:

代码语言:javascript
复制
 public ThreadPoolExecutor(int corePoolSize,
 int maximumPoolSize,
 long keepAliveTime,
 TimeUnit unit,
 BlockingQueue<Runnable> workQueue,
 ThreadFactory threadFactory,
 RejectedExecutionHandler handler) {
 if (corePoolSize < 0 ||
            maximumPoolSize <= 0 ||
            maximumPoolSize < corePoolSize ||
            keepAliveTime < 0)
 throw new IllegalArgumentException();
 if (workQueue == null || threadFactory == null || handler == null)
 throw new NullPointerException();
 this.corePoolSize = corePoolSize;
 this.maximumPoolSize = maximumPoolSize;
 this.workQueue = workQueue;
 this.keepAliveTime = unit.toNanos(keepAliveTime);
 this.threadFactory = threadFactory;
 this.handler = handler;
 }

共有七个参数,每个参数含义如下:

corePoolSize

线程池中核心线程的数量。当提交一个任务时,线程池会新建一个线程来执行任务,直到当前线程数等于corePoolSize。如果调用了线程池的prestartAllCoreThreads()方法,线程池会提前创建并启动所有基本线程。

maximumPoolSize

线程池中允许的最大线程数。线程池的阻塞队列满了之后,如果还有任务提交,如果当前的线程数小于maximumPoolSize,则会新建线程来执行任务。注意,如果使用的是无界队列,该参数也就没有什么效果了。

keepAliveTime

线程空闲的时间。线程的创建和销毁是需要代价的。线程执行完任务后不会立即销毁,而是继续存活一段时间:keepAliveTime。默认情况下,该参数只有在线程数大于corePoolSize时才会生效。

unit

keepAliveTime的单位。TimeUnit

workQueue

用来保存等待执行的任务的阻塞队列,等待的任务必须实现Runnable接口。我们可以选择如下几种:

  • ArrayBlockingQueue:基于数组结构的有界阻塞队列,FIFO。【死磕Java并发】----J.U.C之阻塞队列:ArrayBlockingQueue
  • LinkedBlockingQueue:基于链表结构的有界阻塞队列,FIFO。
  • SynchronousQueue:不存储元素的阻塞队列,每个插入操作都必须等待一个移出操作,反之亦然。【死磕Java并发】----J.U.C之阻塞队列:SynchronousQueue
  • PriorityBlockingQueue:具有优先界别的阻塞队列。【死磕Java并发】----J.U.C之阻塞队列:PriorityBlockingQueue

threadFactory

用于设置创建线程的工厂。该对象可以通过Executors.defaultThreadFactory(),如下:

代码语言:javascript
复制
public static ThreadFactory defaultThreadFactory() {        
return new DefaultThreadFactory();
}

返回的是DefaultThreadFactory对象,源码如下:

代码语言:javascript
复制
 static class DefaultThreadFactory implements ThreadFactory {
 private static final AtomicInteger poolNumber = new AtomicInteger(1);
 private final ThreadGroup group;
 private final AtomicInteger threadNumber = new AtomicInteger(1);
 private final String namePrefix;
 DefaultThreadFactory() {
 SecurityManager s = System.getSecurityManager();
            group = (s != null) ? s.getThreadGroup() :
 Thread.currentThread().getThreadGroup();
            namePrefix = "pool-" +
                          poolNumber.getAndIncrement() +
 "-thread-";
 }
 public Thread newThread(Runnable r) {
 Thread t = new Thread(group, r,
                                  namePrefix + threadNumber.getAndIncrement(),
 0);
 if (t.isDaemon())
                t.setDaemon(false);
 if (t.getPriority() != Thread.NORM_PRIORITY)
                t.setPriority(Thread.NORM_PRIORITY);
 return t;
 }
 }

ThreadFactory的左右就是提供创建线程的功能的线程工厂。他是通过newThread()方法提供创建线程的功能,newThread()方法创建的线程都是“非守护线程”而且“线程优先级都是Thread.NORM_PRIORITY”。

handler

RejectedExecutionHandler,线程池的拒绝策略。所谓拒绝策略,是指将任务添加到线程池中时,线程池拒绝该任务所采取的相应策略。当向线程池中提交任务时,如果此时线程池中的线程已经饱和了,而且阻塞队列也已经满了,则线程池会选择一种拒绝策略来处理该任务。

线程池提供了四种拒绝策略:

  1. AbortPolicy:直接抛出异常,默认策略;
  2. CallerRunsPolicy:用调用者所在的线程来执行任务;
  3. DiscardOldestPolicy:丢弃阻塞队列中靠最前的任务,并执行当前任务;
  4. DiscardPolicy:直接丢弃任务; 当然我们也可以实现自己的拒绝策略,例如记录日志等等,实现RejectedExecutionHandler接口即可。

线程池

Executor框架提供了三种线程池,他们都可以通过工具类Executors来创建。

FixedThreadPool

FixedThreadPool,可重用固定线程数的线程池,其定义如下:

代码语言:javascript
复制
 public static ExecutorService newFixedThreadPool(int nThreads) {
 return new ThreadPoolExecutor(nThreads, nThreads,
 0L, TimeUnit.MILLISECONDS,
 new LinkedBlockingQueue<Runnable>());

corePoolSize 和 maximumPoolSize都设置为创建FixedThreadPool时指定的参数nThreads,意味着当线程池满时且阻塞队列也已经满时,如果继续提交任务,则会直接走拒绝策略,该线程池不会再新建线程来执行任务,而是直接走拒绝策略。FixedThreadPool使用的是默认的拒绝策略,即AbortPolicy,则直接抛出异常。

keepAliveTime设置为0L,表示空闲的线程会立刻终止。

workQueue则是使用LinkedBlockingQueue,但是没有设置范围,那么则是最大值(Integer.MAX_VALUE),这基本就相当于一个无界队列了。使用该“无界队列”则会带来哪些影响呢?当线程池中的线程数量等于corePoolSize 时,如果继续提交任务,该任务会被添加到阻塞队列workQueue中,当阻塞队列也满了之后,则线程池会新建线程执行任务直到maximumPoolSize。由于FixedThreadPool使用的是“无界队列”LinkedBlockingQueue,那么maximumPoolSize参数无效,同时指定的拒绝策略AbortPolicy也将无效。而且该线程池也不会拒绝提交的任务,如果客户端提交任务的速度快于任务的执行,那么keepAliveTime也是一个无效参数。

其运行图如下(参考《Java并发编程的艺术》):

SingleThreadExecutor

SingleThreadExecutor是使用单个worker线程的Executor,定义如下:

代码语言:javascript
复制
 public static ExecutorService newSingleThreadExecutor() {
 return new FinalizableDelegatedExecutorService
 (new ThreadPoolExecutor(1, 1,
 0L, TimeUnit.MILLISECONDS,
 new LinkedBlockingQueue<Runnable>()));
 }

作为单一worker线程的线程池,SingleThreadExecutor把corePool和maximumPoolSize均被设置为1,和FixedThreadPool一样使用的是无界队列LinkedBlockingQueue,所以带来的影响和FixedThreadPool一样。

CachedThreadPool

CachedThreadPool是一个会根据需要创建新线程的线程池 ,他定义如下:

代码语言:javascript
复制
 public static ExecutorService newCachedThreadPool() {
 return new ThreadPoolExecutor(0, Integer.MAX_VALUE,
 60L, TimeUnit.SECONDS,
 new SynchronousQueue<Runnable>());
 }

CachedThreadPool的corePool为0,maximumPoolSize为Integer.MAXVALUE,这就意味着所有的任务一提交就会加入到阻塞队列中。keepAliveTime这是为60L,unit设置为TimeUnit.SECONDS,意味着空闲线程等待新任务的最长时间为60秒,空闲线程超过60秒后将会被终止。阻塞队列采用的SynchronousQueue,而我们在【死磕Java并发】----J.U.C之阻塞队列:SynchronousQueue中了解到SynchronousQueue是一个没有元素的阻塞队列,加上corePool = 0 ,maximumPoolSize = Integer.MAXVALUE,这样就会存在一个问题,如果主线程提交任务的速度远远大于CachedThreadPool的处理速度,则CachedThreadPool会不断地创建新线程来执行任务,这样有可能会导致系统耗尽CPU和内存资源,所以在使用该线程池是,一定要注意控制并发的任务数,否则创建大量的线程可能导致严重的性能问题

任务提交

线程池根据业务不同的需求提供了两种方式提交任务:Executor.execute()、ExecutorService.submit()。其中ExecutorService.submit()可以获取该任务执行的Future。 我们以Executor.execute()为例,来看看线程池的任务提交经历了那些过程。

定义:

代码语言:javascript
复制
public interface Executor {    void execute(Runnable command);}

ThreadPoolExecutor提供实现:

代码语言:javascript
复制
 public void execute(Runnable command) {
 if (command == null)
 throw new NullPointerException();
 int c = ctl.get();
 if (workerCountOf(c) < corePoolSize) {
 if (addWorker(command, true))
 return;
            c = ctl.get();
 }
 if (isRunning(c) && workQueue.offer(command)) {
 int recheck = ctl.get();
 if (! isRunning(recheck) && remove(command))
                reject(command);
 else if (workerCountOf(recheck) == 0)
                addWorker(null, false);
 }
 else if (!addWorker(command, false))
            reject(command);
 }

执行流程如下:

  1. 如果线程池当前线程数小于corePoolSize,则调用addWorker创建新线程执行任务,成功返回true,失败执行步骤2。
  2. 如果线程池处于RUNNING状态,则尝试加入阻塞队列,如果加入阻塞队列成功,则尝试进行Double Check,如果加入失败,则执行步骤3。
  3. 如果线程池不是RUNNING状态或者加入阻塞队列失败,则尝试创建新线程直到maxPoolSize,如果失败,则调用reject()方法运行相应的拒绝策略。

在步骤2中如果加入阻塞队列成功了,则会进行一个Double Check的过程。Double Check过程的主要目的是判断加入到阻塞队里中的线程是否可以被执行。如果线程池不是RUNNING状态,则调用remove()方法从阻塞队列中删除该任务,然后调用reject()方法处理任务。否则需要确保还有线程执行。

addWorker当线程中的当前线程数小于corePoolSize,则调用addWorker()创建新线程执行任务,当前线程数则是根据ctl变量来获取的,调用workerCountOf(ctl)获取低29位即可:

代码语言:javascript
复制
    private static int workerCountOf(int c)  { return c & CAPACITY; }

addWorker(Runnable firstTask, boolean core)方法用于创建线程执行任务,源码如下:

  1. private boolean addWorker(Runnable firstTask, boolean core) {
  2.        retry:
  3. for (;;) {
  4. int c = ctl.get();
  5. // 获取当前线程状态
  6. int rs = runStateOf(c);
  7. if (rs >= SHUTDOWN &&
  8. ! (rs == SHUTDOWN &&
  9.                            firstTask == null &&
  10. ! workQueue.isEmpty()))
  11. return false;
  12. // 内层循环,worker + 1
  13. for (;;) {
  14. // 线程数量
  15. int wc = workerCountOf(c);
  16. // 如果当前线程数大于线程最大上限CAPACITY  return false
  17. // 若core == true,则与corePoolSize 比较,否则与maximumPoolSize ,大于 return false
  18. if (wc >= CAPACITY ||
  19.                        wc >= (core ? corePoolSize : maximumPoolSize))
  20. return false;
  21. // worker + 1,成功跳出retry循环
  22. if (compareAndIncrementWorkerCount(c))
  23. break retry;
  24. // CAS add worker 失败,再次读取ctl
  25.                c = ctl.get();
  26. // 如果状态不等于之前获取的state,跳出内层循环,继续去外层循环判断
  27. if (runStateOf(c) != rs)
  28. continue retry;
  29. }
  30. }
  31. boolean workerStarted = false;
  32. boolean workerAdded = false;
  33. Worker w = null;
  34. try {
  35. // 新建线程:Worker
  36.            w = new Worker(firstTask);
  37. // 当前线程
  38. final Thread t = w.thread;
  39. if (t != null) {
  40. // 获取主锁:mainLock
  41. final ReentrantLock mainLock = this.mainLock;
  42.                mainLock.lock();
  43. try {
  44. // 线程状态
  45. int rs = runStateOf(ctl.get());
  46. // rs < SHUTDOWN ==> 线程处于RUNNING状态
  47. // 或者线程处于SHUTDOWN状态,且firstTask == null(可能是workQueue中仍有未执行完成的任务,创建没有初始任务的worker线程执行)
  48. if (rs < SHUTDOWN ||
  49. (rs == SHUTDOWN && firstTask == null)) {
  50. // 当前线程已经启动,抛出异常
  51. if (t.isAlive()) // precheck that t is startable
  52. throw new IllegalThreadStateException();
  53. // workers是一个HashSet<Worker>
  54.                        workers.add(w);
  55. // 设置最大的池大小largestPoolSize,workerAdded设置为true
  56. int s = workers.size();
  57. if (s > largestPoolSize)
  58.                            largestPoolSize = s;
  59.                        workerAdded = true;
  60. }
  61. } finally {
  62. // 释放锁
  63.                    mainLock.unlock();
  64. }
  65. // 启动线程
  66. if (workerAdded) {
  67.                    t.start();
  68.                    workerStarted = true;
  69. }
  70. }
  71. } finally {
  72. // 线程启动失败
  73. if (! workerStarted)
  74.                addWorkerFailed(w);
  75. }
  76. return workerStarted;
  77. }
  78. 判断当前线程是否可以添加任务,如果可以则进行下一步,否则return false;
  79. rs >= SHUTDOWN ,表示当前线程处于SHUTDOWN ,STOP、TIDYING、TERMINATED状态
  80. rs == SHUTDOWN , firstTask != null时不允许添加线程,因为线程处于SHUTDOWN 状态,不允许添加任务
  81. rs == SHUTDOWN , firstTask == null,但workQueue.isEmpty() == true,不允许添加线程,因为firstTask == null是为了添加一个没有任务的线程然后再从workQueue中获取任务的,如果workQueue == null,则说明添加的任务没有任何意义。
  82. 内嵌循环,通过CAS worker + 1
  83. 获取主锁mailLock,如果线程池处于RUNNING状态获取处于SHUTDOWN状态且 firstTask == null,则将任务添加到workers Queue中,然后释放主锁mainLock,然后启动线程,然后return true,如果中途失败导致workerStarted= false,则调用addWorkerFailed()方法进行处理。

在这里需要好好理论addWorker中的参数,在execute()方法中,有三处调用了该方法: 第一次:workerCountOf(c) < corePoolSize ==> addWorker(command, true),这个很好理解,当然线程池的线程数量小于 corePoolSize ,则新建线程执行任务即可,在执行过程core == true,内部与corePoolSize比较即可。 第二次:加入阻塞队列进行Double Check时,else if (workerCountOf(recheck) == 0) ==>addWorker(null, false)。如果线程池中的线程==0,按照道理应该该任务应该新建线程执行任务,但是由于已经该任务已经添加到了阻塞队列,那么就在线程池中新建一个空线程,然后从阻塞队列中取线程即可。 第三次:线程池不是RUNNING状态或者加入阻塞队列失败:else if (!addWorker(command, false)),这里core == fase,则意味着是与maximumPoolSize比较。

在新建线程执行任务时,将讲Runnable包装成一个Worker,Woker为ThreadPoolExecutor的内部类

Woker内部类

Woker的源码如下:

  1. private final class Worker extends AbstractQueuedSynchronizer
  2. implements Runnable {
  3. private static final long serialVersionUID = 6138294804551838833L;
  4. // task 的thread
  5. final Thread thread;
  6. // 运行的任务task
  7. Runnable firstTask;
  8. volatile long completedTasks;
  9. Worker(Runnable firstTask) {
  10. //设置AQS的同步状态private volatile int state,是一个计数器,大于0代表锁已经被获取
  11.            setState(-1);
  12. this.firstTask = firstTask;
  13. // 利用ThreadFactory和 Worker这个Runnable创建的线程对象
  14. this.thread = getThreadFactory().newThread(this);
  15. }
  16. // 任务执行
  17. public void run() {
  18.            runWorker(this);
  19. }
  20. }

从Worker的源码中我们可以看到Woker继承AQS,实现Runnable接口,所以可以认为Worker既是一个可以执行的任务,也可以达到获取锁释放锁的效果。这里继承AQS主要是为了方便线程的中断处理。这里注意两个地方:构造函数、run()。构造函数主要是做三件事:1.设置同步状态state为-1,同步状态大于0表示就已经获取了锁,2.设置将当前任务task设置为firstTask,3.利用Worker本身对象this和ThreadFactory创建线程对象。

当线程thread启动(调用start()方法)时,其实就是执行Worker的run()方法,内部调用runWorker()。

runWorker

  1. final void runWorker(Worker w) {
  2. // 当前线程
  3. Thread wt = Thread.currentThread();
  4. // 要执行的任务
  5. Runnable task = w.firstTask;
  6.        w.firstTask = null;
  7. // 释放锁,运行中断
  8.        w.unlock(); // allow interrupts
  9. boolean completedAbruptly = true;
  10. try {
  11. while (task != null || (task = getTask()) != null) {
  12. // worker 获取锁
  13.                w.lock();
  14. // 确保只有当线程是stoping时,才会被设置为中断,否则清楚中断标示
  15. // 如果线程池状态 >= STOP ,且当前线程没有设置中断状态,则wt.interrupt()
  16. // 如果线程池状态 < STOP,但是线程已经中断了,再次判断线程池是否 >= STOP,如果是 wt.interrupt()
  17. if ((runStateAtLeast(ctl.get(), STOP) ||
  18. (Thread.interrupted() &&
  19.                                runStateAtLeast(ctl.get(), STOP))) &&
  20. !wt.isInterrupted())
  21.                    wt.interrupt();
  22. try {
  23. // 自定义方法
  24.                    beforeExecute(wt, task);
  25. Throwable thrown = null;
  26. try {
  27. // 执行任务
  28.                        task.run();
  29. } catch (RuntimeException x) {
  30.                        thrown = x; throw x;
  31. } catch (Error x) {
  32.                        thrown = x; throw x;
  33. } catch (Throwable x) {
  34.                        thrown = x; throw new Error(x);
  35. } finally {
  36.                        afterExecute(task, thrown);
  37. }
  38. } finally {
  39.                    task = null;
  40. // 完成任务数 + 1
  41.                    w.completedTasks++;
  42. // 释放锁
  43.                    w.unlock();
  44. }
  45. }
  46.            completedAbruptly = false;
  47. } finally {
  48.            processWorkerExit(w, completedAbruptly);
  49. }
  50. }

运行流程

  1. 根据worker获取要执行的任务task,然后调用unlock()方法释放锁,这里释放锁的主要目的在于中断,因为在new Worker时,设置的state为-1,调用unlock()方法可以将state设置为0,这里主要原因就在于interruptWorkers()方法只有在state >= 0时才会执行;
  2. 通过getTask()获取执行的任务,调用task.run()执行,当然在执行之前会调用worker.lock()上锁,执行之后调用worker.unlock()放锁;
  3. 在任务执行前后,可以根据业务场景自定义beforeExecute() 和 afterExecute()方法,则两个方法在ThreadPoolExecutor中是空实现;
  4. 如果线程执行完成,则会调用getTask()方法从阻塞队列中获取新任务,如果阻塞队列为空,则根据是否超时来判断是否需要阻塞;
  5. task == null或者抛出异常(beforeExecute()、task.run()、afterExecute()均有可能)导致worker线程终止,则调用processWorkerExit()方法处理worker退出流程。

getTask()

  1. private Runnable getTask() {
  2. boolean timedOut = false; // Did the last poll() time out?
  3. for (;;) {
  4. // 线程池状态
  5. int c = ctl.get();
  6. int rs = runStateOf(c);
  7. // 线程池中状态 >= STOP 或者 线程池状态 == SHUTDOWN且阻塞队列为空,则worker - 1,return null
  8. if (rs >= SHUTDOWN && (rs >= STOP || workQueue.isEmpty())) {
  9.                decrementWorkerCount();
  10. return null;
  11. }
  12. int wc = workerCountOf(c);
  13. // 判断是否需要超时控制
  14. boolean timed = allowCoreThreadTimeOut || wc > corePoolSize;
  15. if ((wc > maximumPoolSize || (timed && timedOut)) && (wc > 1 || workQueue.isEmpty())) {
  16. if (compareAndDecrementWorkerCount(c))
  17. return null;
  18. continue;
  19. }
  20. try {
  21. // 从阻塞队列中获取task
  22. // 如果需要超时控制,则调用poll(),否则调用take()
  23. Runnable r = timed ?
  24.                        workQueue.poll(keepAliveTime, TimeUnit.NANOSECONDS) :
  25.                        workQueue.take();
  26. if (r != null)
  27. return r;
  28.                timedOut = true;
  29. } catch (InterruptedException retry) {
  30.                timedOut = false;
  31. }
  32. }
  33. }

timed == true,调用poll()方法,如果在keepAliveTime时间内还没有获取task的话,则返回null,继续循环。timed == false,则调用take()方法,该方法为一个阻塞方法,没有任务时会一直阻塞挂起,直到有任务加入时对该线程唤醒,返回任务。

在runWorker()方法中,无论最终结果如何,都会执行processWorkerExit()方法对worker进行退出处理。

processWorkerExit()

  1. private void processWorkerExit(Worker w, boolean completedAbruptly) {
  2. // true:用户线程运行异常,需要扣减
  3. // false:getTask方法中扣减线程数量
  4. if (completedAbruptly)
  5.            decrementWorkerCount();
  6. // 获取主锁
  7. final ReentrantLock mainLock = this.mainLock;
  8.        mainLock.lock();
  9. try {
  10.            completedTaskCount += w.completedTasks;
  11. // 从HashSet中移出worker
  12.            workers.remove(w);
  13. } finally {
  14.            mainLock.unlock();
  15. }
  16. // 有worker线程移除,可能是最后一个线程退出需要尝试终止线程池
  17.        tryTerminate();
  18. int c = ctl.get();
  19. // 如果线程为running或shutdown状态,即tryTerminate()没有成功终止线程池,则判断是否有必要一个worker
  20. if (runStateLessThan(c, STOP)) {
  21. // 正常退出,计算min:需要维护的最小线程数量
  22. if (!completedAbruptly) {
  23. // allowCoreThreadTimeOut 默认false:是否需要维持核心线程的数量
  24. int min = allowCoreThreadTimeOut ? 0 : corePoolSize;
  25. // 如果min ==0 或者workerQueue为空,min = 1
  26. if (min == 0 && ! workQueue.isEmpty())
  27.                    min = 1;
  28. // 如果线程数量大于最少数量min,直接返回,不需要新增线程
  29. if (workerCountOf(c) >= min)
  30. return; // replacement not needed
  31. }
  32. // 添加一个没有firstTask的worker
  33.            addWorker(null, false);
  34. }
  35. }

首先completedAbruptly的值来判断是否需要对线程数-1处理,如果completedAbruptly == true,说明在任务运行过程中出现了异常,那么需要进行减1处理,否则不需要,因为减1处理在getTask()方法中处理了。然后从HashSet中移出该worker,过程需要获取mainlock。然后调用tryTerminate()方法处理,该方法是对最后一个线程退出做终止线程池动作。如果线程池没有终止,那么线程池需要保持一定数量的线程,则通过addWorker(null,false)新增一个空的线程。

addWorkerFailed()

在addWorker()方法中,如果线程t==null,或者在add过程出现异常,会导致workerStarted == false,那么在最后会调用addWorkerFailed()方法:

  1. private void addWorkerFailed(Worker w) {
  2. final ReentrantLock mainLock = this.mainLock;
  3.        mainLock.lock();
  4. try {
  5. // 从HashSet中移除该worker
  6. if (w != null)
  7.                workers.remove(w);
  8. // 线程数 - 1
  9.            decrementWorkerCount();
  10. // 尝试终止线程
  11.            tryTerminate();
  12. } finally {
  13.            mainLock.unlock();
  14. }
  15. }

整个逻辑显得比较简单。

tryTerminate()

当线程池涉及到要移除worker时候都会调用tryTerminate(),该方法主要用于判断线程池中的线程是否已经全部移除了,如果是的话则关闭线程池。

  1. final void tryTerminate() {
  2. for (;;) {
  3. int c = ctl.get();
  4. // 线程池处于Running状态
  5. // 线程池已经终止了
  6. // 线程池处于ShutDown状态,但是阻塞队列不为空
  7. if (isRunning(c) ||
  8.                    runStateAtLeast(c, TIDYING) ||
  9. (runStateOf(c) == SHUTDOWN && ! workQueue.isEmpty()))
  10. return;
  11. // 执行到这里,就意味着线程池要么处于STOP状态,要么处于SHUTDOWN且阻塞队列为空
  12. // 这时如果线程池中还存在线程,则会尝试中断线程
  13. if (workerCountOf(c) != 0) {
  14. // /线程池还有线程,但是队列没有任务了,需要中断唤醒等待任务的线程
  15. // (runwoker的时候首先就通过w.unlock设置线程可中断,getTask最后面的catch处理中断)
  16.                interruptIdleWorkers(ONLY_ONE);
  17. return;
  18. }
  19. final ReentrantLock mainLock = this.mainLock;
  20.            mainLock.lock();
  21. try {
  22. // 尝试终止线程池
  23. if (ctl.compareAndSet(c, ctlOf(TIDYING, 0))) {
  24. try {
  25.                        terminated();
  26. } finally {
  27. // 线程池状态转为TERMINATED
  28.                        ctl.set(ctlOf(TERMINATED, 0));
  29.                        termination.signalAll();
  30. }
  31. return;
  32. }
  33. } finally {
  34.                mainLock.unlock();
  35. }
  36. }
  37. }

在关闭线程池的过程中,如果线程池处于STOP状态或者处于SHUDOWN状态且阻塞队列为null,则线程池会调用interruptIdleWorkers()方法中断所有线程,注意ONLY_ONE== true,表示仅中断一个线程。

interruptIdleWorkers

  1. private void interruptIdleWorkers(boolean onlyOne) {
  2. final ReentrantLock mainLock = this.mainLock;
  3.        mainLock.lock();
  4. try {
  5. for (Worker w : workers) {
  6. Thread t = w.thread;
  7. if (!t.isInterrupted() && w.tryLock()) {
  8. try {
  9.                        t.interrupt();
  10. } catch (SecurityException ignore) {
  11. } finally {
  12.                        w.unlock();
  13. }
  14. }
  15. if (onlyOne)
  16. break;
  17. }
  18. } finally {
  19.            mainLock.unlock();
  20. }
  21. }

onlyOne==true仅终止一个线程,否则终止所有线程。

线程终止

线程池ThreadPoolExecutor提供了shutdown()和shutDownNow()用于关闭线程池。

shutdown():按过去执行已提交任务的顺序发起一个有序的关闭,但是不接受新任务。

shutdownNow() :尝试停止所有的活动执行任务、暂停等待任务的处理,并返回等待执行的任务列表。

shutdown

  1. public void shutdown() {
  2. final ReentrantLock mainLock = this.mainLock;
  3.        mainLock.lock();
  4. try {
  5.            checkShutdownAccess();
  6. // 推进线程状态
  7.            advanceRunState(SHUTDOWN);
  8. // 中断空闲的线程
  9.            interruptIdleWorkers();
  10. // 交给子类实现
  11.            onShutdown();
  12. } finally {
  13.            mainLock.unlock();
  14. }
  15.        tryTerminate();
  16. }

shutdownNow

  1. public List<Runnable> shutdownNow() {
  2. List<Runnable> tasks;
  3. final ReentrantLock mainLock = this.mainLock;
  4.        mainLock.lock();
  5. try {
  6.            checkShutdownAccess();
  7.            advanceRunState(STOP);
  8. // 中断所有线程
  9.            interruptWorkers();
  10. // 返回等待执行的任务列表
  11.            tasks = drainQueue();
  12. } finally {
  13.            mainLock.unlock();
  14. }
  15.        tryTerminate();
  16. return tasks;
  17. }

与shutdown不同,shutdownNow会调用interruptWorkers()方法中断所有线程。

  1. private void interruptWorkers() {
  2. final ReentrantLock mainLock = this.mainLock;
  3.        mainLock.lock();
  4. try {
  5. for (Worker w : workers)
  6.                w.interruptIfStarted();
  7. } finally {
  8.            mainLock.unlock();
  9. }
  10. }

同时会调用drainQueue()方法返回等待执行到任务列表。

  1. private List<Runnable> drainQueue() {
  2. BlockingQueue<Runnable> q = workQueue;
  3. ArrayList<Runnable> taskList = new ArrayList<Runnable>();
  4.        q.drainTo(taskList);
  5. if (!q.isEmpty()) {
  6. for (Runnable r : q.toArray(new Runnable[0])) {
  7. if (q.remove(r))
  8.                    taskList.add(r);
  9. }
  10. }
  11. return taskList;
  12. }

END

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2017-12-27,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 chenssy 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 内部状态
  • 创建线程池
  • 线程池
  • 任务提交
  • 线程终止
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档