位置: IT常识 - 正文

线程池中的一个 BUG,注意了!!(线程池中的一个线程执行完一个任务后)

编辑:rootadmin
来源:https://segmentfault.com/a/1190000021109130 问题描述 前几天在帮同事排查生产一个线上偶发的线程池错误 逻辑很简单,线程池执行了一个带结果的异步任务。但是最近有偶发的报错: java.util.concurrent.RejectedExecutionE ...

推荐整理分享线程池中的一个 BUG,注意了!!(线程池中的一个线程执行完一个任务后),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:线程池个数,线程池中的一个数是什么,线程池中的线程,线程池个数,线程池的一个线程挂了,线程池个数,线程池的一个线程挂了,线程池中的一个数是什么,内容如对您有帮助,希望把文章链接给更多的朋友!

来源:https://segmentfault.com/a/1190000021109130

问题描述

前几天在帮同事排查生产一个线上偶发的线程池错误

逻辑很简单,线程池执行了一个带结果的异步任务。但是最近有偶发的报错:

java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@a5acd19 rejected from java.util.concurrent.ThreadPoolExecutor@30890a38[Terminated, pool size = 0, active threads = 0, queued tasks = 0, completed tasks = 0]

本文中的模拟代码已经问题都是在HotSpot java8 (1.8.0_221)版本下模拟&出现的

下面是模拟代码,通过Executors.newSingleThreadExecutor创建一个单线程的线程池,然后在调用方获取Future的结果

public class ThreadPoolTest { public static void main(String[] args) { final ThreadPoolTest threadPoolTest = new ThreadPoolTest(); for (int i = 0; i < 8; i++) { new Thread(new Runnable() { @Override public void run() { while (true) { Future<String> future = threadPoolTest.submit(); try { String s = future.get(); } catch (InterruptedException e) { e.printStackTrace(); } catch (ExecutionException e) { e.printStackTrace(); } catch (Error e) { e.printStackTrace(); } } } }).start(); } //子线程不停gc,模拟偶发的gc new Thread(new Runnable() { @Override public void run() { while (true) { System.gc(); } } }).start(); } /** * 异步执行任务 * @return */ public Future<String> submit() { //关键点,通过Executors.newSingleThreadExecutor创建一个单线程的线程池 ExecutorService executorService = Executors.newSingleThreadExecutor(); FutureTask<String> futureTask = new FutureTask(new Callable() { @Override public Object call() throws Exception { Thread.sleep(50); return System.currentTimeMillis() + ""; } }); executorService.execute(futureTask); return futureTask; }}分析&疑问

第一个思考的问题是:线程池为什么关闭了,代码中并没有手动关闭的地方。看一下Executors.newSingleThreadExecotor的源码实现:

public static ExecutorService newSingleThreadExecutor() { return new FinalizableDelegatedExecutorService (new ThreadPoolExecutor(1, 1, 0L, TimeUnit.MILLISECONDS, new LinkedBlockingQueue<Runnable>()));}

这里创建的实际上是一个FinalizableDelegatedExecutorService,这个包装类重写了finalize函数,也就是说这个类会在被GC回收之前,先执行线程池的shutdown方法。

问题来了,GC只会回收不可达(unreachable)的对象,在submit函数的栈帧未执行完出栈之前,executorService应该是可达的才对。

更多多线程系列教程:https://www.javastack.cn/categories/Java/

对于此问题,先抛出结论:

当对象仍存在于作用域(stack frame)时,finalize也可能会被执行

oracle jdk文档中有一段关于finalize的介绍:

A reachable object is any object that can be accessed in any potential continuing computation from any live thread.

Optimizing transformations of a program can be designed that reduce the number of objects that are reachable to be less than those which would naively be considered reachable. For example, a Java compiler or code generator may choose to set a variable or parameter that will no longer be used to null to cause the storage for such an object to be potentially reclaimable sooner.

大概意思是:可达对象(reachable object)是可以从任何活动线程的任何潜在的持续访问中的任何对象;java编译器或代码生成器可能会对不再访问的对象提前置为null,使得对象可以被提前回收

也就是说,在jvm的优化下,可能会出现对象不可达之后被提前置空并回收的情况

举个例子来验证一下,摘自:https://stackoverflow.com/questions/24376768/can-java-finalize-an-object-when-it-is-still-in-scope

class A { @Override protected void finalize() { System.out.println(this + " was finalized!"); } public static void main(String[] args) throws InterruptedException { A a = new A(); System.out.println("Created " + a); for (int i = 0; i < 1_000_000_000; i++) { if (i % 1_000_00 == 0) System.gc(); } System.out.println("done."); }}//打印结果Created A@1be6f5c3A@1be6f5c3 was finalized!//finalize方法输出done.

从例子中可以看到,如果a在循环完成后已经不再使用了,则会出现先执行finalize的情况;虽然从对象作用域来说,方法没有执行完,栈帧并没有出栈,但是还是会被提前执行。

现在来增加一行代码,在最后一行打印对象a,让编译器/代码生成器认为后面有对象a的引用

...System.out.println(a);//打印结果Created A@1be6f5c3done.A@1be6f5c3

从结果上看,finalize方法都没有执行(因为main方法执行完成后进程直接结束了),更不会出现提前finalize的问题了

线程池中的一个 BUG,注意了!!(线程池中的一个线程执行完一个任务后)

基于上面的测试结果,再测试一种情况,在循环之前先将对象a置为null,并且在最后打印保持对象a的引用

A a = new A();System.out.println("Created " + a);a = null;//手动置nullfor (int i = 0; i < 1_000_000_000; i++) { if (i % 1_000_00 == 0) System.gc();}System.out.println("done.");System.out.println(a);//打印结果Created A@1be6f5c3A@1be6f5c3 was finalized!done.null

从结果上看,手动置null的话也会导致对象被提前回收,虽然在最后还有引用,但此时引用的也是null了

现在再回到上面的线程池问题,根据上面介绍的机制,在分析没有引用之后,对象会被提前finalize

可在上述代码中,return之前明明是有引用的executorService.execute(futureTask),为什么也会提前finalize呢?

猜测可能是由于在execute方法中,会调用threadPoolExecutor,会创建并启动一个新线程,这时会发生一次主动的线程切换,导致在活动线程中对象不可达

结合上面Oracle Jdk文档中的描述“可达对象(reachable object)是可以从任何活动线程的任何潜在的持续访问中的任何对象”,可以认为可能是因为一次显示的线程切换,对象被认为不可达了,导致线程池被提前finalize了

下面来验证一下猜想:

//入口函数public class FinalizedTest { public static void main(String[] args) { final FinalizedTest finalizedTest = new FinalizedTest(); for (int i = 0; i < 8; i++) { new Thread(new Runnable() { @Override public void run() { while (true) { TFutureTask future = finalizedTest.submit(); } } }).start(); } new Thread(new Runnable() { @Override public void run() { while (true) { System.gc(); } } }).start(); } public TFutureTask submit(){ TExecutorService TExecutorService = Executors.create(); TExecutorService.execute(); return null; }}//Executors.java,模拟juc的Executorspublic class Executors { /** * 模拟Executors.createSingleExecutor * @return */ public static TExecutorService create(){ return new FinalizableDelegatedTExecutorService(new TThreadPoolExecutor()); } static class FinalizableDelegatedTExecutorService extends DelegatedTExecutorService { FinalizableDelegatedTExecutorService(TExecutorService executor) { super(executor); } /** * 析构函数中执行shutdown,修改线程池状态 * @throws Throwable */ @Override protected void finalize() throws Throwable { super.shutdown(); } } static class DelegatedTExecutorService extends TExecutorService { protected TExecutorService e; public DelegatedTExecutorService(TExecutorService executor) { this.e = executor; } @Override public void execute() { e.execute(); } @Override public void shutdown() { e.shutdown(); } }}//TThreadPoolExecutor.java,模拟juc的ThreadPoolExecutorpublic class TThreadPoolExecutor extends TExecutorService { /** * 线程池状态,false:未关闭,true已关闭 */ private AtomicBoolean ctl = new AtomicBoolean(); @Override public void execute() { //启动一个新线程,模拟ThreadPoolExecutor.execute new Thread(new Runnable() { @Override public void run() { } }).start(); //模拟ThreadPoolExecutor,启动新建线程后,循环检查线程池状态,验证是否会在finalize中shutdown //如果线程池被提前shutdown,则抛出异常 for (int i = 0; i < 1_000_000; i++) { if(ctl.get()){ throw new RuntimeException("reject!!!["+ctl.get()+"]"); } } } @Override public void shutdown() { ctl.compareAndSet(false,true); }}

执行若干时间后报错:

Exception in thread "Thread-1" java.lang.RuntimeException: reject!!![true]

从错误上来看,“线程池”同样被提前shutdown了,那么一定是由于新建线程导致的吗?

下面将新建线程修改为Thread.sleep测试一下:

//TThreadPoolExecutor.java,修改后的execute方法public void execute() { try { //显式的sleep 1 ns,主动切换线程 TimeUnit.NANOSECONDS.sleep(1); } catch (InterruptedException e) { e.printStackTrace(); } //模拟ThreadPoolExecutor,启动新建线程后,循环检查线程池状态,验证是否会在finalize中shutdown //如果线程池被提前shutdown,则抛出异常 for (int i = 0; i < 1_000_000; i++) { if(ctl.get()){ throw new RuntimeException("reject!!!["+ctl.get()+"]"); } }}

执行结果一样是报错

Exception in thread "Thread-3" java.lang.RuntimeException: reject!!![true]

由此可得,如果在执行的过程中,发生一次显式的线程切换,则会让编译器/代码生成器认为外层包装对象不可达

总结

虽然GC只会回收不可达GC ROOT的对象,但是在编译器(没有明确指出,也可能是JIT)/代码生成器的优化下,可能会出现对象提前置null,或者线程切换导致的“提前对象不可达”的情况。

所以如果想在finalize方法里做些事情的话,一定在最后显示的引用一下对象(toString/hashcode都可以),保持对象的可达性(reachable)

上面关于线程切换导致的对象不可达,没有官方文献的支持,只是个人一个测试结果,如有问题欢迎指出

综上所述,这种回收机制并不是JDK的bug,而算是一个优化策略,提前回收而已;但Executors.newSingleThreadExecutor的实现里通过finalize来自动关闭线程池的做法是有Bug的,在经过优化后可能会导致线程池的提前shutdown,从而导致异常。

线程池的这个问题,在JDK的论坛里也是一个公开但未解决状态的问题:https://bugs.openjdk.java.net/browse/JDK-8145304。

不过在JDK11下,该问题已经被修复:

JUC Executors.FinalizableDelegatedExecutorServicepublic void execute(Runnable command) { try { e.execute(command); } finally { reachabilityFence(this); }}

近期热文推荐:

1.1,000+ 道 Java面试题及答案整理(2022最新版)

2.劲爆!Java 协程要来了。。。

3.Spring Boot 2.x 教程,太全了!

4.别再写满屏的爆爆爆炸类了,试试装饰器模式,这才是优雅的方式!!

5.《Java开发手册(嵩山版)》最新发布,速速下载!

觉得不错,别忘了随手点赞+转发哦!

本文链接地址:https://www.jiuchutong.com/zhishi/310299.html 转载请保留说明!

上一篇:phpcms怎么重新设置后台网址(phpcms默认密码)

下一篇:js中Array.of的使用(js array.fill)

  • iPhone13怎么启用VoLTE(iphone13怎么启用收发彩信)

    iPhone13怎么启用VoLTE(iphone13怎么启用收发彩信)

  • 抖音怎么自己创作视频(抖音怎么自己创建合集)

    抖音怎么自己创作视频(抖音怎么自己创建合集)

  • 如何隐秘退出qq群(怎么设置退出qq后不接受消息)

    如何隐秘退出qq群(怎么设置退出qq后不接受消息)

  • 微信怎样查好友删除了自己(微信怎样查好友来源)

    微信怎样查好友删除了自己(微信怎样查好友来源)

  • 文件过大怎么缩小(文件过大怎么缩小图片)

    文件过大怎么缩小(文件过大怎么缩小图片)

  • 华为Nova5网速显示在哪里设置(华为nova5网速慢)

    华为Nova5网速显示在哪里设置(华为nova5网速慢)

  • 飞行模式还能查出手机轨迹吗(飞行模式还能查到行程码吗)

    飞行模式还能查出手机轨迹吗(飞行模式还能查到行程码吗)

  • 表格打开是灰色点不了(表格打开是灰色的怎么回事)

    表格打开是灰色点不了(表格打开是灰色的怎么回事)

  • oppoa9有深色模式吗(oppor9s深色模式)

    oppoa9有深色模式吗(oppor9s深色模式)

  • 抖音消息已送达对方看了吗(抖音消息已送达是看了还是没看)

    抖音消息已送达对方看了吗(抖音消息已送达是看了还是没看)

  • wps如何复制整个文档(wps怎么复制全部内容)

    wps如何复制整个文档(wps怎么复制全部内容)

  • 钉钉关了相机权限还可以看直播吗(钉钉关闭了相机权限还可以视频会议吗)

    钉钉关了相机权限还可以看直播吗(钉钉关闭了相机权限还可以视频会议吗)

  • gps定位器可以换卡吗(gps定位器换卡怎么弄)

    gps定位器可以换卡吗(gps定位器换卡怎么弄)

  • 天猫精灵ccl可以投屏吗(天猫精灵ccl可以看抖音吗)

    天猫精灵ccl可以投屏吗(天猫精灵ccl可以看抖音吗)

  • 转转发布不了商品怎么回事(转转个人卖家发布不了商品了)

    转转发布不了商品怎么回事(转转个人卖家发布不了商品了)

  • ipad不贴膜会被刮花吗(ipad不贴膜会被pencil刮花吗)

    ipad不贴膜会被刮花吗(ipad不贴膜会被pencil刮花吗)

  • 抖音怎么删已发视频(抖音怎么删已发的私信)

    抖音怎么删已发视频(抖音怎么删已发的私信)

  • 苹果11怎么切换超广角(苹果11怎么切换输入法)

    苹果11怎么切换超广角(苹果11怎么切换输入法)

  • 怎么防止手机号被定位(怎么防止手机号封号)

    怎么防止手机号被定位(怎么防止手机号封号)

  • 全民k歌鲜花怎么清空(全民k歌鲜花怎么换钱)

    全民k歌鲜花怎么清空(全民k歌鲜花怎么换钱)

  • 手机相素在哪里看(手机像素在哪里改)

    手机相素在哪里看(手机像素在哪里改)

  • 苹果6有128g的吗(苹果6有128g内存的吗)

    苹果6有128g的吗(苹果6有128g内存的吗)

  • 苹果x省电模式在哪(苹果x省电模式打游戏会卡吗)

    苹果x省电模式在哪(苹果x省电模式打游戏会卡吗)

  • 日本北海道 (© Hiroshi Yokoyama/eStock Photo)

    日本北海道 (© Hiroshi Yokoyama/eStock Photo)

  • 【OpenCV】 Canny边缘检测 | 图像轮廓检测 | 直方图均衡化(opencv 边缘检测)

    【OpenCV】 Canny边缘检测 | 图像轮廓检测 | 直方图均衡化(opencv 边缘检测)

  • phpcms怎么更换域名(phpcms怎么用)

    phpcms怎么更换域名(phpcms怎么用)

  • 私立学校要交社保吗
  • 劳务发票要交多少税费
  • 发票盖了财务专用章旁边再盖发票章
  • 资产负债表季报本月数怎么填
  • 驾驶员行车补贴开什么发票
  • 研究开发费用的归集
  • 刚成立的外贸公司做小规模纳税人好不好
  • 公司基本账户销户需要带什么资料
  • 企业助学捐款分录怎么写
  • 递延资产放在资产负债表哪里
  • 汽车道路救援费用多少
  • 与成本直接相关的工资怎么会计处理?
  • 销售包装物的会计处理
  • 发票抬头写个人有效吗
  • 企业与个人租赁合同范本
  • 自然人代人开普票合法吗
  • 外地出差的餐费住宿费是不是都计入差旅费
  • 没有库存先开票再发货
  • 现金流量表附表的其他指的是什么
  • 无票收入增值税申报表怎么填小规模纳税人
  • 建筑工程企业人力资源管理
  • 增值税发票系统报税盘怎么用
  • 境外代扣代缴所得税
  • 企业取得代理销售发票
  • 企业增加值的计算
  • 冲减预付账款是什么意思
  • 会计凭证丢失补违规么
  • javascript中
  • 开户银行对公司有影响吗
  • 应收账款怎么做分录
  • 八仙花的养殖方法冬季怎么养
  • php cmd
  • wordpress项目开发
  • uniapp webgl
  • php linux 环境搭建
  • 政府代建项目税收政策
  • 劳务派遣公司账务
  • 资产负债表与利润表之间的关系
  • 外单位替本单位缴纳医保
  • 陈列费怎么开票
  • 净资产包含哪些项目
  • 企业增值税专用发票抵扣流程
  • 弥补以前年度亏损是季度申报的时候做吗
  • sqlserver编程
  • 职工体检费用标准规定
  • 主营业务成本是借增贷减吗
  • 出口货物备案单证目录怎么填
  • 小规模纳税属于什么科目
  • 销售退货会计分录
  • 会计处理要求
  • 润滑油消费税计算公式
  • 营改增进程
  • 出口转内销增值税报表怎么填
  • 重大水利工程建设
  • 付境外股东股利要交什么税
  • 收到个人所得税手续费返还如何做账
  • 月末结转各项费用支出479000
  • 研发费用人工费用包括
  • mysql怎么复制粘贴语句
  • airdrop怎么用?
  • win10 更新 蓝屏
  • ubuntu安装超详细教程
  • macbook安装ghost win10
  • linux安装wine命令
  • win10没有显示
  • windowsxp如何清理磁盘
  • 光盘pe系统
  • ubuntu 14.04安装
  • 微软报错是什么意思
  • 如果在一个命令行上输入和执行多条命令
  • win1021h2版本怎么样
  • python读取grib
  • python3 django教程
  • JavaScript中的数据类型分哪为两大类?
  • jquery图片放大效果
  • js自定义指令
  • 废旧物资税务风险评估
  • 国税干部任前谈心谈话
  • 计财科科长是什么级别
  • 房屋赠与给子女要交多少税
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设