Java多线程编程-(18)-借ThreadLocal出现OOM内存溢出问题再谈弱引用WeakReference

本文主要是介绍Java多线程编程-(18)-借ThreadLocal出现OOM内存溢出问题再谈弱引用WeakReference,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前几篇:

Java多线程编程-(3)-线程本地ThreadLocal的介绍与使用

Java多线程编程-(8)-多图深入分析ThreadLocal原理

Java多线程编程-(9)-ThreadLocal造成OOM内存溢出案例演示与原理分析

一、简单回顾

在上几篇的时候,已经简单的介绍了不正当的使用ThreadLocal造成OOM的原因,以及ThreadLocal的基本原理,下边我们首先回顾一下ThreadLocal的原理图以及各类之间的关系:

1、Thread、ThreadLocal、ThreadLocalMap、Entry之间的关系(图A):

这里写图片描述

上图中描述了:一个Thread中只有一个ThreadLocalMap,一个ThreadLocalMap中可以有多个ThreadLocal对象,其中一个ThreadLocal对象对应一个ThreadLocalMap中一个的Entry实体(也就是说:一个Thread可以依附有多个ThreadLocal对象)。

2、ThreadLocal各类引用关系(图B):

在ThreadLocal的生命周期中,都存在这些引用。( 实线代表强引用,虚线代表弱引用)

这里写图片描述

ThreadLocal到Entry对象key的引用断裂,而不及时的清理Entry对象,可能会造成OOM内存溢出!

二、引用的类型

我们对引用的理解也许很简单,就是:如果 reference类型的数据中存储的数值代表的是另外一块内存的起始地址,就称这块内存代表着一个引用。但是书上说的这种方式过于狭隘,一个对象在这种定义下只有被引用或者没有被引用两种状态,对于如何描述一些“食之无味,弃之可惜”的对象就显得无能为力。我们希望能描述这样一类对象:当内存空间还足够时,则能保留在内存之中;如果内存在进行垃圾收集后还是非常紧张,则可以抛弃这些对象。很多系统的缓存功能都符合这样的应用场景。

一般的引用类型分为:强引用( Strong Reference)、软引用( Soft Reference)、弱引用( Weak Reference)、虚引用( Phantom Reference)四种,这四种引用强度依次逐渐减弱。

1、下边是四中类型的介绍:

(1)强引用就是指在程序代码之中普遍存在的,类似“Object obj = new Object()”这类的引用,只要强引用还存在,垃圾收集器永远不会回收掉被引用的对象,也就是说即使Java虚拟机内存空间不足时,GC收集器也绝不会回收该对象,如果内存空间不够就会导致内存溢出。

(2)软引用用来描述一些还有用,但并非必需的对象。对于软引用关联着的对象,在系统将要发生内存溢出异常之前,将会把这些对象列进回收范围之中并进行回收,以免出现内存溢出。如果这次回收还是没有足够的内存,才会抛出内存溢出异常。在 JDK 1.2 之后,提供了 SoftReference 类来实现软引用。

软引用适合引用那些可以通过其他方式恢复的对象,例如:数据库缓存中的对象就可以从数据库中恢复,所以软引用可以用来实现缓存。等会会介绍MyBatis中的使用软引用实现缓存的案例。

(3)弱引用也是用来描述非必需对象的,但是它的强度比软引用更弱一些,被弱引用关联的对象只能生存到下一次垃圾收集发生之前。当垃圾收集器工作时,无论当前内存是否足够,都会回收掉只被弱引用关联的对象。在 JDK 1.2 之后,提供了 WeakReference 类来实现弱引用。ThreadLocal使用到的就有弱引用。

(4)虚引用也称为幽灵引用或者幻影引用,它是最弱的一种引用关系。一个对象是否有虚引用的存在,完全不会对其生存时间构成影响,也无法通过虚引用来取得一个对象实例。为一个对象设置虚引用关联的唯一目的就是希望能在这个对象被收集器回收时收到一个系统通知。在 JDK 1.2 之后,提供了PhantomReference 类来实现虚引用。

2、各引用类型的生命周期及作用:

这里写图片描述

三、ThreadLocal中的弱引用

上述我们知道了当垃圾收集器工作时,无论当前内存是否足够,都会回收掉只被弱引用关联的对象。我们的ThreadLocal中ThreadLocalMap中的Entry类的key就是弱引用的,如下:

这里写图片描述

而弱引用会在垃圾收集器工作的时候进行回收,也就是说,只要执行垃圾回收,这些对象就会被回收,也就是上述图B中的虚线连接的地方断开了,就成了一个没有key的Entry,下边演示一下:

1、演示案例简介:

我们知道一个线程Thread可以有多个ThreadLocal变量,这些变量存放在Thread中的ThreadLocalMap变量中,那么我们下边就在主线程main中定义多个ThreadLocal变量,然后我们想办法执行几次GC垃圾回收,再看一下ThreadLocalMap中Entry数组的变化情况。

2、演示代码:

public class ThreadLocalWeakReferenceGCDemo {private static final int THREAD_LOOP_SIZE = 20;public static void main(String[] args) throws InterruptedException {try {//等待连接JConsoleThread.sleep(5000);} catch (InterruptedException e) {e.printStackTrace();}for (int i = 1; i < THREAD_LOOP_SIZE; i++) {ThreadLocal<Map<Integer, String>> threadLocal = new ThreadLocal<>();Map<Integer, String> map = new HashMap<>();map.put(i, "我是第" + i + "个ThreadLocal数据!");threadLocal.set(map);threadLocal.get();System.out.println("第" + i + "次获取ThreadLocal中的数据");try {Thread.sleep(1000);} catch (InterruptedException e) {e.printStackTrace();}}}
}

2、正常执行:

当for循环执行到最后一个的时候,看一下ThreadLocalMap的情况:

这里写图片描述

可以看到此时的ThreadLocalMap中有21个ThreadLocal变量(也就是21个Entry),其中有3个表示main线程中表示的其他ThreadLocal变量,这是正常的执行,并没有发生GC收集。

3、非正常执行:

当for循环执行到中间的时候手动执行GC收集,然后再看一下:

通过JConsole工具手动执行GC收集:

这里写图片描述

执行结果:

这里写图片描述

可以看出算上主线程中其他的Entry一共还有6个,也就可以证明在执行GC收集的时候,弱引用被回收了。

4、你可能会问道,弱引用被回收了只是回收了Entry的key引用,但是Entry应该还是存在的吧?

事情是这样的,我们的ThreadLocal已经帮我们把key为null的Entry清理了,在ThreadLocal的get(),set(),remove()的时候都会清除线程ThreadLocalMap里所有key为null的value。

这里写图片描述

上述源码中描述了清除并重建索引的过程,源码过多,不截图显示。所以,我们最后看到的实际上是已经清除过key为null的Entry之后的结果。这也说明了正常情况下使用ThreadLocal是不会出现OOM内存溢出的,出现内存溢出是和弱引用没有半点关系的!

5、上述代码虽然是手动执行的GC,但正常情况下的GC也是会回收弱引用的

如下(注意:实验请适当调节参数,避免电脑死机),假如我们上述的代码的主函数main改成如下方式:

public static void main(String[] args) throws InterruptedException {ThreadLocal<Map<Integer, String>> threadLocal1 = new ThreadLocal<>();Map<Integer, String> map1 = new HashMap<>(1);map1.put(1, "我是第1个ThreadLocal数据!");threadLocal1.set(map1);ThreadLocal<Map<Integer, String>> threadLocal2 = new ThreadLocal<>();Map<Integer, String> map2 = new HashMap<>(1);map2.put(2, "我是第2个ThreadLocal数据!");threadLocal2.set(map2);for (int i = 3; i <= MAIN_THREAD_LOOP_SIZE; i++) {ThreadLocal<Map<Integer, String>> threadLocal = new ThreadLocal<>();Map<Integer, String> map = new HashMap<>(1);map.put(i, "我是第" + i + "个ThreadLocal数据!");threadLocal.set(map);threadLocal.get();if (i > 20) {//-Xms20m -Xmx20m -Xmn10m -XX:+PrintGCDetails -XX:SurvivorRatio=8//会触发GCbyte[] allocation1, allocation2, allocation3, allocation4;allocation1 = new byte[2 * 1024 * 1024];allocation2 = new byte[2 * 1024 * 1024];allocation3 = new byte[2 * 1024 * 1024];allocation4 = new byte[4 * 1024 * 1024];}}System.out.println("-------" + threadLocal1.get());System.out.println("-------" + threadLocal2.get());}

设置VM参数:

这里写图片描述

最后的运行结果:

这里写图片描述

调试中查看threadLocal的数据,如下:

这里写图片描述

这里写图片描述

可见,虽然这里我们自己定义了30个ThreadLocal变量,但是最后的确只有14个,其中还有三个是属于其他的,还有一点值得注意的是,我们的threadLocal1threadLocal2 变量,在进行GC垃圾回收的时候,弱引用的Key是没有进行回收的,最后存活了下来!使得我们最后通过get方法可以获取到正确的数据。

6、为什么threadLocal1和threadLocal2变量没有被回收?

这里我们就需要重新认识一下,什么是:当垃圾收集器工作时,无论当前内存是否足够,都会回收掉只被弱引用关联的对象,这里的重点是:只被弱引用关联的对象

首先举个实例:

public class WeakRefrenceDemo {public static void main(String[] args) {User user = new User("hello", "123");WeakReference<User> userWeakReference = new WeakReference<>(user);System.out.println(userWeakReference.get());//另一种方式触发GC,强制执行GCSystem.gc();System.runFinalization();System.out.println(userWeakReference.get());}public static class User {private String userName;private String userPwd;//省去全参构造方法和toString()方法}
}

执行结果:

这里写图片描述

可以看到,上述过程尽管GC执行了垃圾收集,但是弱引用还是可以访问到结果的,也就是没有被回收,这是因为除了一个弱引用userWeakReference 指向了User实例对象,还有user指向User的实例对象,只有当user和User实例对象的引用断了的时候,弱引用的对象才会被真正的回收,看下图:

这里写图片描述

由上图可知道,usernew User()是在不同的内存空间的,他们之间是通过引用进行关联起来的。

如果把上述主函数改成代码如下,将user = null,则断开了他们之间的引用关系,但是还有一个弱引用userWeakReference 指向new User()

public static void main(String[] args) {User user = new User("hello", "123");WeakReference<User> userWeakReference = new WeakReference<>(user);System.out.println(userWeakReference.get());user = null; //断开引用System.gc(); //强制执行GCSystem.runFinalization();System.out.println(userWeakReference.get());}

执行结果如下:

这里写图片描述

可以看到断开了user和new User()之间的引用之后,就只有弱引用了,因此,上述的那段话:都会回收掉只被弱引用关联的对象。因此该new User()会被回收。

因此,就出现了最开始看到的threadLocal1、threadLocal2都还可以访问到数据(for循环里边的,由于作用于的问题,引用已经断开了),那我我们只有通过手动设为null的方式,看一下效果,代码改为如下:

    public static void main(String[] args) throws InterruptedException {ThreadLocal<Map<Integer, String>> threadLocal1 = new ThreadLocal<>();Map<Integer, String> map1 = new HashMap<>(1);map1.put(1, "我是第1个ThreadLocal数据!");threadLocal1.set(map1);threadLocal1 = null;System.gc(); //强制执行GCSystem.runFinalization();ThreadLocal<Map<Integer, String>> threadLocal2 = new ThreadLocal<>();Map<Integer, String> map2 = new HashMap<>(1);map2.put(2, "我是第2个ThreadLocal数据!");threadLocal2.set(map2);threadLocal2 = null;System.gc(); //强制执行GCSystem.runFinalization();ThreadLocal<Map<Integer, String>> threadLocal3 = new ThreadLocal<>();Map<Integer, String> map3 = new HashMap<>(1);map3.put(3, "我是第3个ThreadLocal数据!");threadLocal3.set(map3);ThreadLocal<Map<Integer, String>> threadLocal4 = new ThreadLocal<>();Map<Integer, String> map4 = new HashMap<>(1);map4.put(4, "我是第4个ThreadLocal数据!");threadLocal4.set(map4);System.out.println("-------" + threadLocal3.get());}
}

执行结果:

这里写图片描述

可以看到,是我们想要的结果,弱引用也被回收了。

另外还有一种可能是,我们得到的结果有3个,分别是2、3、4,这是有可能的,这是由于垃圾回收器是一个优先级较低的线程, 因此不一定会很快发现那些只具有弱引用的对象,即只有等到系统垃圾回收机制运行时才会被回收。但是我们已经看到了我们想要的结果。

7、总结

到了这里,你应该明白,并不是所有弱引用的对象都会在第二次GC回收的时候被回收,而是回收掉只被弱引用关联的对象。因此,使用弱引用的时候要注意到!希望以后在面试的时候,不要上来张口就说,弱引用在第二次执行GC之后就会被回收!知其然,知其所以然!

四、引用队列

在很多场景中,我们的程序需要在一个对象的可达性(GC可达性,判断对象是否需要回收)发生变化的时候得到通知,引用队列就是用于收集这些信息的队列。

在创建SoftReference对象时,可以为其关联一个引用队列,当SoftReference所引用的对象被回收的时候,Java虚拟机就会将该SoftReference对象添加到预支关联的引用队列中。

需要检查这些通知信息时,就可以从引用队列中获取这些SoftReference对象。

不仅仅是SoftReference支持使用引用队列,软引用和虚引用也可以关相应的引用队列。

这里写图片描述

先看一个简单的案例:

public class WeakCache {private void printReferenceQueue(ReferenceQueue<Object> referenceQueue) {WeakEntry sv;while ((sv = (WeakEntry) referenceQueue.poll()) != null) {System.out.println("引用队列中元素的key:" + sv.key);}}private static class WeakEntry extends WeakReference<Object> {private Object key;WeakEntry(Object key, Object value, ReferenceQueue<Object> referenceQueue) {//调用父类的构造函数,并传入需要进行关联的引用队列super(value, referenceQueue);this.key = key;}}public static void main(String[] args) {ReferenceQueue<Object> referenceQueue = new ReferenceQueue<>();User user = new User("xuliugen", "123456");WeakCache.WeakEntry weakEntry = new WeakCache.WeakEntry("654321", user, referenceQueue);System.out.println("还没被回收之前的数据:" + weakEntry.get());user = null;System.gc(); //强制执行GCSystem.runFinalization();System.out.println("已经被回收之后的数据:" + weakEntry.get());new WeakCache().printReferenceQueue(referenceQueue);}
}

执行结果:

这里写图片描述

ReferenceQueue引用队列记录了GC收集器回收的引用,这样的话,我们就可以通过引用队列的数据来判断引用是否被回收,以及被回收之后做相应的处理,例如:如果使用弱引用做缓存则需要清除缓存,或者重新设置缓存等。

其实,上述的代码,是从MyBatis的源码中抽离出来的,MyBatis在缓存的时候也提供了对弱引用和软引用的支持,MyBatis相关的源码如下:

这里写图片描述

任何一个牛逼的框架,也是一个一个知识点的使用。这篇文章的内容很多,似乎有点又长又臭,不过还是希望对你有所帮助!另外,个人能力有限,难免有所疏漏,如果有也请你及时提出来,以免误人子弟。


个人公众号,欢迎关注

这里写图片描述

这篇关于Java多线程编程-(18)-借ThreadLocal出现OOM内存溢出问题再谈弱引用WeakReference的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/997114

相关文章

linux生产者,消费者问题

pthread_cond_wait() :用于阻塞当前线程,等待别的线程使用pthread_cond_signal()或pthread_cond_broadcast来唤醒它。 pthread_cond_wait() 必须与pthread_mutex 配套使用。pthread_cond_wait()函数一进入wait状态就会自动release mutex。当其他线程通过pthread

C++对象布局及多态实现探索之内存布局(整理的很多链接)

本文通过观察对象的内存布局,跟踪函数调用的汇编代码。分析了C++对象内存的布局情况,虚函数的执行方式,以及虚继承,等等 文章链接:http://dev.yesky.com/254/2191254.shtml      论C/C++函数间动态内存的传递 (2005-07-30)   当你涉及到C/C++的核心编程的时候,你会无止境地与内存管理打交道。 文章链接:http://dev.yesky

问题:第一次世界大战的起止时间是 #其他#学习方法#微信

问题:第一次世界大战的起止时间是 A.1913 ~1918 年 B.1913 ~1918 年 C.1914 ~1918 年 D.1914 ~1919 年 参考答案如图所示

Java五子棋之坐标校正

上篇针对了Java项目中的解构思维,在这篇内容中我们不妨从整体项目中拆解拿出一个非常重要的五子棋逻辑实现:坐标校正,我们如何使漫无目的鼠标点击变得有序化和可控化呢? 目录 一、从鼠标监听到获取坐标 1.MouseListener和MouseAdapter 2.mousePressed方法 二、坐标校正的具体实现方法 1.关于fillOval方法 2.坐标获取 3.坐标转换 4.坐

Spring Cloud:构建分布式系统的利器

引言 在当今的云计算和微服务架构时代,构建高效、可靠的分布式系统成为软件开发的重要任务。Spring Cloud 提供了一套完整的解决方案,帮助开发者快速构建分布式系统中的一些常见模式(例如配置管理、服务发现、断路器等)。本文将探讨 Spring Cloud 的定义、核心组件、应用场景以及未来的发展趋势。 什么是 Spring Cloud Spring Cloud 是一个基于 Spring

Javascript高级程序设计(第四版)--学习记录之变量、内存

原始值与引用值 原始值:简单的数据即基础数据类型,按值访问。 引用值:由多个值构成的对象即复杂数据类型,按引用访问。 动态属性 对于引用值而言,可以随时添加、修改和删除其属性和方法。 let person = new Object();person.name = 'Jason';person.age = 42;console.log(person.name,person.age);//'J

java8的新特性之一(Java Lambda表达式)

1:Java8的新特性 Lambda 表达式: 允许以更简洁的方式表示匿名函数(或称为闭包)。可以将Lambda表达式作为参数传递给方法或赋值给函数式接口类型的变量。 Stream API: 提供了一种处理集合数据的流式处理方式,支持函数式编程风格。 允许以声明性方式处理数据集合(如List、Set等)。提供了一系列操作,如map、filter、reduce等,以支持复杂的查询和转

2024.6.24 IDEA中文乱码问题(服务器 控制台 TOMcat)实测已解决

1.问题产生原因: 1.文件编码不一致:如果文件的编码方式与IDEA设置的编码方式不一致,就会产生乱码。确保文件和IDEA使用相同的编码,通常是UTF-8。2.IDEA设置问题:检查IDEA的全局编码设置和项目编码设置是否正确。3.终端或控制台编码问题:如果你在终端或控制台看到乱码,可能是终端的编码设置问题。确保终端使用的是支持你的文件的编码方式。 2.解决方案: 1.File -> S

Java面试八股之怎么通过Java程序判断JVM是32位还是64位

怎么通过Java程序判断JVM是32位还是64位 可以通过Java程序内部检查系统属性来判断当前运行的JVM是32位还是64位。以下是一个简单的方法: public class JvmBitCheck {public static void main(String[] args) {String arch = System.getProperty("os.arch");String dataM

详细分析Springmvc中的@ModelAttribute基本知识(附Demo)

目录 前言1. 注解用法1.1 方法参数1.2 方法1.3 类 2. 注解场景2.1 表单参数2.2 AJAX请求2.3 文件上传 3. 实战4. 总结 前言 将请求参数绑定到模型对象上,或者在请求处理之前添加模型属性 可以在方法参数、方法或者类上使用 一般适用这几种场景: 表单处理:通过 @ModelAttribute 将表单数据绑定到模型对象上预处理逻辑:在请求处理之前