使用 ThreadLocal 不當可能會導致內存泄露,是什么原因導致的內存泄漏呢?
我們首先看一個例子,代碼如下:
/** * Created by cong on 2018/7/14. */ public class ThreadLocalOutOfMemoryTest { static class LocalVariable { private Long[] a = new Long[1024*1024]; } // (1) final static ThreadPoolExecutor poolExecutor = new ThreadPoolExecutor(6, 6, 1, TimeUnit.MINUTES, new LinkedBlockingQueue<>()); // (2) final static ThreadLocal<LocalVariable> localVariable = new ThreadLocal<LocalVariable>(); public static void main(String[] args) throws InterruptedException { // (3) for (int i = 0; i < 50; ++i) { poolExecutor.execute(new Runnable() { public void run() { // (4) localVariable.set(new LocalVariable()); // (5) System.out.println("use local varaible"); // localVariable.remove(); } }); Thread.sleep(1000); } // (6) System.out.println("pool execute over"); } }
代碼(1)創建了一個核心線程數和最大線程數為 6 的線程池,這個保證了線程池里面隨時都有 6 個線程在運行。
代碼(2)創建了一個 ThreadLocal 的變量,泛型參數為 LocalVariable,LocalVariable 內部是一個 Long 數組。
代碼(3)向線程池里面放入 50 個任務。
代碼(4)設置當前線程的 localVariable 變量,也就是把 new 的 LocalVariable 變量放入當前線程的 threadLocals 變量。
由於沒有調用線程池的 shutdown 或者 shutdownNow 方法所以線程池里面的用戶線程不會退出,進而 JVM 進程也不會退出。
運行后,我們立即打開jconsole 監控堆內存變化,如下圖:
接着,讓我們打開 localVariable.remove() 注釋,然后在運行,觀察堆內存變化如下:
從第一次運行結果可知,當主線程處於休眠時候進程占用了大概 75M 內存,打開 localVariable.remove() 注釋后第二次運行則占用了大概 25M 內存,可知 沒有寫 localVariable.remove() 時候內存發生了泄露,下面分析下泄露的原因,如下:
第一次運行的代碼,在設置線程的 localVariable 變量后沒有調用localVariable.remove()
方法,導致線程池里面的 5 個線程的 threadLocals 變量里面的new LocalVariable()
實例沒有被釋放,雖然線程池里面的任務執行完畢了,但是線程池里面的 5 個線程會一直存在直到 JVM 退出。這里需要注意的是由於 localVariable 被聲明了 static,雖然線程的 ThreadLocalMap 里面是對 localVariable 的弱引用,localVariable 也不會被回收。運行結果二的代碼由於線程在設置 localVariable 變量后即使調用了localVariable.remove()
方法進行了清理,所以不會存在內存泄露。
接下來我們要想清楚的知道內存泄漏的根本原因,那么我們就要進入源碼去看了。
我們知道ThreadLocal 只是一個工具類,具體存放變量的是在線程的 threadLocals 變量里面,threadLocals 是一個 ThreadLocalMap 類型的,我們首先一覽ThreadLocalMap的類圖結構,類圖結構如下圖:
如上圖 ThreadLocalMap 內部是一個 Entry 數組, Entry 繼承自 WeakReference,Entry 內部的 value 用來存放通過 ThreadLocal 的 set 方法傳遞的值,那么 ThreadLocal 對象本身存放到哪里了嗎?
下面看看 Entry 的構造函數,如下所示:
Entry(ThreadLocal<?> k, Object v) { super(k); value = v; }
接着我們再接着看Entry的父類WeakReference的構造函數super(k),如下所示:
public WeakReference(T referent) { super(referent); }
接着我們再看WeakReference的父類Reference的構造函數super(referent),如下所示:
Reference(T referent) { this(referent, null); }
接着我們再看WeakReference的父類Reference的另外一個構造函數this(referent , null),如下所示:
Reference(T referent, ReferenceQueue<? super T> queue) { this.referent = referent; this.queue = (queue == null) ? ReferenceQueue.NULL : queue; }
可知 k 被傳遞到了 WeakReference 的構造函數里面,也就是說 ThreadLocalMap 里面的 key 為 ThreadLocal 對象的弱引用,具體是 referent 變量引用了 ThreadLocal 對象,value 為具體調用 ThreadLocal 的 set 方法傳遞的值。
當一個線程調用 ThreadLocal 的 set 方法設置變量時候,當前線程的 ThreadLocalMap 里面就會存放一個記錄,這個記錄的 key 為 ThreadLocal 的引用,value 則為設置的值。
但是考慮如果這個 ThreadLocal 變量沒有了其他強依賴,而當前線程還存在的情況下,由於線程的 ThreadLocalMap 里面的 key 是弱依賴,則當前線程的 ThreadLocalMap 里面的 ThreadLocal 變量的弱引用會被在 gc 的時候回收,但是對應 value 還是會造成內存泄露,這時候 ThreadLocalMap 里面就會存在 key 為 null 但是 value 不為 null 的 entry 項。
其實在 ThreadLocal 的 set 和 get 和 remove 方法里面有一些時機是會對這些 key 為 null 的 entry 進行清理的,但是這些清理不是必須發生的,下面簡單講解ThreadLocalMap 的 remove 方法的清理過程,remove 的源碼,如下所示:
private void remove(ThreadLocal<?> key) { //(1)計算當前ThreadLocal變量所在table數組位置,嘗試使用快速定位方法 Entry[] tab = table; int len = tab.length; int i = key.threadLocalHashCode & (len-1); //(2)這里使用循環是防止快速定位失效后,變量table數組 for (Entry e = tab[i]; e != null; e = tab[i = nextIndex(i, len)]) { //(3)找到 if (e.get() == key) { //(4)找到則調用WeakReference的clear方法清除對ThreadLocal的弱引用 e.clear(); //(5)清理key為null的元素 expungeStaleEntry(i); return; } } } private int expungeStaleEntry(int staleSlot) { Entry[] tab = table; int len = tab.length; //(6)去掉去value的引用 tab[staleSlot].value = null; tab[staleSlot] = null; size--;
Entry e; int i; for (i = nextIndex(staleSlot, len); (e = tab[i]) != null; i = nextIndex(i, len)) { ThreadLocal<?> k = e.get(); //(7)如果key為null,則去掉對value的引用。 if (k == null) { e.value = null; tab[i] = null; size--; } else { int h = k.threadLocalHashCode & (len - 1); if (h != i) { tab[i] = null; while (tab[h] != null) h = nextIndex(h, len); tab[h] = e; } } } return i; }
代碼(4)調用了 Entry 的 clear 方法,實際調用的是父類 WeakReference 的 clear 方法,作用是去掉對 ThreadLocal 的弱引用。
代碼(6)是去掉對 value 的引用,到這里當前線程里面的當前 ThreadLocal 對象的信息被清理完畢了。
代碼(7)從當前元素的下標開始看 table 數組里面的其他元素是否有 key 為 null 的,有則清理。循環退出的條件是遇到 table 里面有 null 的元素。所以這里知道 null 元素后面的 Entry 里面 key 為 null 的元素不會被清理。
總結:
1.ThreadLocalMap 內部 Entry 中 key 使用的是對 ThreadLocal 對象的弱引用,這為避免內存泄露是一個進步,因為如果是強引用,那么即使其他地方沒有對 ThreadLocal 對象的引用,ThreadLocalMap 中的 ThreadLocal 對象還是不會被回收,而如果是弱引用則這時候 ThreadLocal 引用是會被回收掉的。
2.但是對於的 value 還是不能被回收,這時候 ThreadLocalMap 里面就會存在 key 為 null 但是 value 不為 null 的 entry 項,雖然 ThreadLocalMap 提供了 set,get,remove 方法在一些時機下會對這些 Entry 項進行清理,但是這是不及時的,也不是每次都會執行的,所以一些情況下還是會發生內存泄露,所以在使用完畢后即使調用 remove 方法才是解決內存泄露的最好辦法。
3.線程池里面設置了 ThreadLocal 變量一定要記得及時清理,因為線程池里面的核心線程是一直存在的,如果不清理,那么線程池的核心線程的 threadLocals 變量一直會持有 ThreadLocal 變量。