Skip to content

yefei14131/dynamic-thread-pool-excutor-apollo

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

7 Commits
 
 
 
 
 
 

Repository files navigation

dynamic-thread-pool-excutor-apollo

基于apollo的可动态配置线程池

背景

  1. 线程池参数设置不合理想要调整怎么办?修改代码里的参数,重新上线。
  2. 服务重启后,queue里的任务会丢失,如何保障?……
  3. 能否动态修改corePoolSize,maximumPoolSize? 可以,源码支持,可通过以下方法修改 threadPoolExecutor.setCorePoolSize(corePoolSize); threadPoolExecutor.setMaximumPoolSize(maxPoolSize);
  4. 可以动态修改Queue的长度吗?不可以。Executors.newFixedThreadPool()方法使用的LinkedBlockingQueue,长度熟悉capacity是final,不可修改。可以自定义queue实现。ResizeableCapacityLinkedBlockIngQueue是从LinkedBlockingQueue拷贝代码实现的,去掉了capacity的final修饰,并添加了setCapacity和getCapacity方法。创建线程时使用ResizeableCapacityLinkedBlockIngQueue可实现动态修改长度。

结合Apollo动态配置线程池主要参数的实现方案

  1. 在Apollo后台配置线程池相关参数
  2. Apollo clien端使用ApolloConfigChangeListener监听变化,如有线程池相关配置变化,找到对应的线程池bean并修改其参数

具体使用方法

  1. 在apollo后台创建namespace: dynamic.thread。 必须使用"dynamic.thread"这个namespace,因为 changeListener监听的是这个namespace。
  2. 在dynamic.thread下创建线程池相关的参数,目前支持核心线程数、最大线程数、队列最大长度。具体配置如下,其中demoExecutorBeanName为线程池beanName,与业务系统里的beanName对应。
    • demoExecutorBeanName.threadPool.corePoolSize。核心线程数。固定以“.threadPool.corePoolSize”结尾、${demoExecutorBeanName}开头,且中间不能包含其他字符。
    • demoExecutorBeanName.threadPool.maxPoolSize。最大线程数。固定以“.threadPool.maxPoolSize”结尾、${demoExecutorBeanName}开头,且中间不能包含其他字符。
    • demoExecutorBeanName.threadPool.maxQueueSize。核心线程数。固定以“.threadPool.maxQueueSize”结尾、${demoExecutorBeanName}开头,且中间不能包含其他字符。
  3. 业务代码里集成Apollo,参考官方文档:https://github.com/ctripcorp/apollo
  4. 业务代码里添加maven依赖
<dependency>
	<groupId>com.hualala.qa</groupId>
	<artifactId>dynamic.thread.pool.excutor</artifactId>
	<version>1.0-SNAPSHOT</version>
</dependency>
  1. 业务代码里创建线程池实例。
@Configuration
@EnableApolloConfig("dynamic.thread")
public class ThreadPoolConfig1 {

    @Value("${demoExecutorBeanName.threadPool.corePoolSize}")
    private int corePoolSize;

    @Value("${demoExecutorBeanName.threadPool.maxPoolSize}")
    private int maxPoolSize;

    @Value("${demoExecutorBeanName.threadPool.maxQueueSize}")
    private int maxQueueSize;

    @Bean(name = "demoExecutorBeanName")
    public ThreadPoolExecutor createThreadPoolExecutor(){
        return new ThreadPoolExecutor(corePoolSize, maxPoolSize, 60, TimeUnit.SECONDS, new ResizeableCapacityLinkedBlockIngQueue<>(maxQueueSize));
    }
}

About

基于apollo的可动态配置线程池

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages