深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1) -凯发k8网页登录

关注后端架构、中间件、分布式和并发编程

   :: 凯发k8网页登录首页 :: 新随笔 :: 联系 :: 聚合  :: 管理 ::
  111 随笔 :: 10 文章 :: 2680 评论 :: 0 trackbacks

 [本文地址:]


线程池数据结构与线程构造方法

由于已经看到了threadpoolexecutor的源码,因此很容易就看到了threadpoolexecutor线程池的数据结构。图1描述了这种数据结构。

图1 threadpoolexecutor 数据结构

其实,即使没有上述图形描述threadpoolexecutor的数据结构,我们根据线程池的要求也很能够猜测出其数据结构出来。

  • 线程池需要支持多个线程并发执行,因此有一个线程集合collection来执行线程任务;
  • 涉及任务的异步执行,因此需要有一个集合来缓存任务队列collection
  • 很显然在多个线程之间协调多个任务,那么就需要一个线程安全的任务集合,同时还需要支持阻塞、超时操作,那么blockingqueue是必不可少的;
  • 既然是线程池,出发点就是提高系统性能同时降低资源消耗,那么线程池的大小就有限制,因此需要有一个核心线程池大小(线程个数)和一个最大线程池大小(线程个数),有一个计数用来描述当前线程池大小;
  • 如果是有限的线程池大小,那么长时间不使用的线程资源就应该销毁掉,这样就需要一个线程空闲时间的计数来描述线程何时被销毁;
  • 前面描述过线程池也是有生命周期的,因此需要有一个状态来描述线程池当前的运行状态;
  • 线程池的任务队列如果有边界,那么就需要有一个任务拒绝策略来处理过多的任务,同时在线程池的销毁阶段也需要有一个任务拒绝策略来处理新加入的任务;
  • 上面种的线程池大小、线程空闲实际那、线程池运行状态等等状态改变都不是线程安全的,因此需要有一个全局的锁(mainlock)来协调这些竞争资源;
  • 除了以上数据结构以外,threadpoolexecutor还有一些状态用来描述线程池的运行计数,例如线程池运行的任务数、曾经达到的最大线程数,主要用于调试和性能分析。

 

对于threadpoolexecutor而言,一个线程就是一个worker对象,它与一个线程绑定,当worker执行完毕就是线程执行完毕,这个在后面详细讨论线程池中线程的运行方式。

既然是线程池,那么就首先研究下线程的构造方法。

public interface threadfactory {
    thread newthread(runnable r);
}

 

threadpoolexecutor使用一个线程工厂来构造线程。线程池都是提交一个任务runnable,然后在某一个线程thread中执行,threadfactory 负责如何创建一个新线程。

在j.u.c中有一个通用的线程工厂java.util.concurrent.executors.defaultthreadfactory,它的构造方式如下:

static class defaultthreadfactory implements threadfactory {
   
static final atomicinteger poolnumber = new atomicinteger(1);
   
final threadgroup group;
   
final atomicinteger threadnumber = new atomicinteger(1);
   
final string nameprefix;
    defaultthreadfactory() {
        securitymanager s
= system.getsecuritymanager();
        group
= (s != null)? s.getthreadgroup() :
                             thread.currentthread().getthreadgroup();
        nameprefix
= "pool-" 
                      poolnumber.getandincrement()

                    
"-thread-";
    }
   
public thread newthread(runnable r) {
        thread t
= new thread(group, r,
                              nameprefix
threadnumber.getandincrement(),
                             
0);
       
if (t.isdaemon())
            t.setdaemon(
false);
       
if (t.getpriority() != thread.norm_priority)
            t.setpriority(thread.norm_priority);
       
return t;
    }
}

 

在这个线程工厂中,同一个线程池的所有线程属于同一个线程组,也就是创建线程池的那个线程组,同时线程池的名称都是“pool--thread-”,其中poolnum是线程池的数量序号,threadnum是此线程池中的线程数量序号。这样如果使用jstack的话很容易就看到了系统中线程池的数量和线程池中线程的数量。另外对于线程池中的所有线程默认都转换为非后台线程,这样主线程退出时不会直接退出jvm,而是等待线程池结束。还有一点就是默认将线程池中的所有线程都调为同一个级别,这样在操作系统角度来看所有系统都是公平的,不会导致竞争堆积。

线程池中线程生命周期

一个线程worker被构造出来以后就开始处于运行状态。以下是一个线程执行的简版逻辑。

private final class worker implements runnable {
   
private final reentrantlock runlock = new reentrantlock();
   
private runnable firsttask;
    thread thread;
    worker(runnable firsttask) {
       
this.firsttask = firsttask;
    }
   
private void runtask(runnable task) {
       
final reentrantlock runlock = this.runlock;
        runlock.lock();
       
try {
           task.run();
        }
finally {
            runlock.unlock();
        }
    }
   
public void run() {
       
try {
            runnable task
= firsttask;
            firsttask
= null;
           
while (task != null || (task = gettask()) != null) {
                runtask(task);
                task
= null;
            }
        }
finally {
            workerdone(
this);
        }
    }
}

 

当提交一个任务时,如果需要创建一个线程(何时需要在下一节中探讨)时,就调用线程工厂创建一个线程,同时将线程绑定到worker工作队列中。需要说明的是,worker队列构造的时候带着一个任务runnable,因此worker创建时总是绑定着一个待执行任务。换句话说,创建线程的前提是有必要创建线程(任务数已经超出了线程或者强制创建新的线程,至于为何强制创建新的线程后面章节会具体分析),不会无缘无故创建一堆空闲线程等着任务。这是节省资源的一种方式。

一旦线程池启动线程后(调用线程run())方法,那么线程工作队列worker就从第1个任务开始执行(这时候发现构造worker时传递一个任务的好处了),一旦第1个任务执行完毕,就从线程池的任务队列中取出下一个任务进行执行。循环如此,直到线程池被关闭或者任务抛出了一个runtimeexception。

由此可见,线程池的基本原理其实也很简单,无非预先启动一些线程,线程进入死循环状态,每次从任务队列中获取一个任务进行执行,直到线程池被关闭。如果某个线程因为执行某个任务发生异常而终止,那么重新创建一个新的线程而已。如此反复。

其实,线程池原理看起来简单,但是复杂的是各种策略,例如何时该启动一个线程,何时该终止、挂起、唤醒一个线程,任务队列的阻塞与超时,线程池的生命周期以及任务拒绝策略等等。下一节将研究这些策略问题。

 

view more from .

 



©2009-2014 imxylz
|求贤若渴
posted on 2011-01-18 23:43 imxylz 阅读(15892) 评论(6)     所属分类: java concurrency
# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1) 2011-01-19 02:36
真是太好了。非常详细的技术文档  回复  
  

# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1)[未登录] 2011-01-20 05:46
thanks!  回复  
  

# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1) 2011-03-30 15:38
真是太详细了  回复  
  

# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1)[未登录] 2012-05-09 12:15
很感谢总结与分享,这个系列收获很多  回复  
  

# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1)[未登录] 2014-05-08 11:31
看完了这一篇,很详细。

有一个问题就是:worker的数量是如何确定的,由哪个参数确定?

worker是在什么时候被构造出来的?   回复  
  

# re: 深入浅出 java concurrency (33): 线程池 part 6 线程池的实现及原理 (1) 2014-05-08 11:56 imxylz
@nemo

当提交一个任务时,如果需要创建一个线程(何时需要在下一节中探讨)时,就调用线程工厂创建一个线程,同时将线程绑定到worker工作队列中。

线程池有两个核心变量:corepoolsize与maximumpoolsize。

下一页描述的比较详细:  回复  
  


©2009-2014
网站地图