Java並發編程筆記之ThreadLocal內存泄漏探究


使用 ThreadLocal 不當可能會導致內存泄露,是什么原因導致的內存泄漏呢?

我們首先看一個例子,代碼如下:

/**
 * Created by cong on 2018/7/14.
 */
public class ThreadLocalOutOfMemoryTest {
    static class LocalVariable {
        private Long[] a = new Long[1024*1024];
    }

    // (1)
    final static ThreadPoolExecutor poolExecutor = new ThreadPoolExecutor(6, 6, 1, TimeUnit.MINUTES,
            new LinkedBlockingQueue<>());
    // (2)
    final static ThreadLocal<LocalVariable> localVariable = new ThreadLocal<LocalVariable>();

    public static void main(String[] args) throws InterruptedException {
        // (3)
        for (int i = 0; i < 50; ++i) {
            poolExecutor.execute(new Runnable() {
                public void run() {
                    // (4)
                    localVariable.set(new LocalVariable());
                    // (5)
                    System.out.println("use local varaible");
//                    localVariable.remove();

                }
            });

            Thread.sleep(1000);
        }
        // (6)
        System.out.println("pool execute over");
    }
}

代碼(1)創建了一個核心線程數和最大線程數為 6 的線程池,這個保證了線程池里面隨時都有 6 個線程在運行。

代碼(2)創建了一個 ThreadLocal 的變量,泛型參數為 LocalVariable,LocalVariable 內部是一個 Long 數組。

代碼(3)向線程池里面放入 50 個任務。

代碼(4)設置當前線程的 localVariable 變量,也就是把 new 的 LocalVariable 變量放入當前線程的 threadLocals 變量。

由於沒有調用線程池的 shutdown 或者 shutdownNow 方法所以線程池里面的用戶線程不會退出,進而 JVM 進程也不會退出。

 

運行后,我們立即打開jconsole 監控堆內存變化,如下圖:

接着,讓我們打開 localVariable.remove() 注釋,然后在運行,觀察堆內存變化如下:

 

 從第一次運行結果可知,當主線程處於休眠時候進程占用了大概 75M 內存,打開 localVariable.remove() 注釋后第二次運行則占用了大概 25M 內存,可知 沒有寫 localVariable.remove() 時候內存發生了泄露,下面分析下泄露的原因,如下:

第一次運行的代碼,在設置線程的 localVariable 變量后沒有調用localVariable.remove() 方法,導致線程池里面的 5 個線程的 threadLocals 變量里面的new LocalVariable()實例沒有被釋放,雖然線程池里面的任務執行完畢了,但是線程池里面的 5 個線程會一直存在直到 JVM 退出。這里需要注意的是由於 localVariable 被聲明了 static,雖然線程的 ThreadLocalMap 里面是對 localVariable 的弱引用,localVariable 也不會被回收。運行結果二的代碼由於線程在設置 localVariable 變量后即使調用了localVariable.remove()方法進行了清理,所以不會存在內存泄露。

 

接下來我們要想清楚的知道內存泄漏的根本原因,那么我們就要進入源碼去看了。

我們知道ThreadLocal 只是一個工具類,具體存放變量的是在線程的 threadLocals 變量里面,threadLocals 是一個 ThreadLocalMap 類型的,我們首先一覽ThreadLocalMap的類圖結構,類圖結構如下圖:

 如上圖 ThreadLocalMap 內部是一個 Entry 數組, Entry 繼承自 WeakReference,Entry 內部的 value 用來存放通過 ThreadLocal 的 set 方法傳遞的值,那么 ThreadLocal 對象本身存放到哪里了嗎?

下面看看 Entry 的構造函數,如下所示:

Entry(ThreadLocal<?> k, Object v) {
    super(k);
    value = v;
}

接着我們再接着看Entry的父類WeakReference的構造函數super(k),如下所示:

public WeakReference(T referent) {
   super(referent);
}

接着我們再看WeakReference的父類Reference的構造函數super(referent),如下所示:

Reference(T referent) {
   this(referent, null);
}

接着我們再看WeakReference的父類Reference的另外一個構造函數this(referent , null),如下所示:

Reference(T referent, ReferenceQueue<? super T> queue) {
   this.referent = referent;
   this.queue = (queue == null) ? ReferenceQueue.NULL : queue;
}

可知 k 被傳遞到了 WeakReference 的構造函數里面,也就是說 ThreadLocalMap 里面的 key 為 ThreadLocal 對象的弱引用,具體是 referent 變量引用了 ThreadLocal 對象,value 為具體調用 ThreadLocal 的 set 方法傳遞的值。

當一個線程調用 ThreadLocal 的 set 方法設置變量時候,當前線程的 ThreadLocalMap 里面就會存放一個記錄,這個記錄的 key 為 ThreadLocal 的引用,value 則為設置的值。

但是考慮如果這個 ThreadLocal 變量沒有了其他強依賴,而當前線程還存在的情況下,由於線程的 ThreadLocalMap 里面的 key 是弱依賴,則當前線程的 ThreadLocalMap 里面的 ThreadLocal 變量的弱引用會被在 gc 的時候回收,但是對應 value 還是會造成內存泄露,這時候 ThreadLocalMap 里面就會存在 key 為 null 但是 value 不為 null 的 entry 項。

其實在 ThreadLocal 的 set 和 get 和 remove 方法里面有一些時機是會對這些 key 為 null 的 entry 進行清理的,但是這些清理不是必須發生的,下面簡單講解ThreadLocalMap 的 remove 方法的清理過程,remove 的源碼,如下所示:

private void remove(ThreadLocal<?> key) {

  //(1)計算當前ThreadLocal變量所在table數組位置,嘗試使用快速定位方法
  Entry[] tab = table;
  int len = tab.length;
  int i = key.threadLocalHashCode & (len-1);
  //(2)這里使用循環是防止快速定位失效后,變量table數組
  for (Entry e = tab[i]; e != null; e = tab[i = nextIndex(i, len)]) {
      //(3)找到
      if (e.get() == key) {
          //(4)找到則調用WeakReference的clear方法清除對ThreadLocal的弱引用
          e.clear();
          //(5)清理key為null的元素
          expungeStaleEntry(i);
          return;
      }
   }
}
 private int expungeStaleEntry(int staleSlot) {
            Entry[] tab = table;
            int len = tab.length;
            //(6)去掉去value的引用
            tab[staleSlot].value = null;
            tab[staleSlot] = null;
            size--;
Entry e;
int i; for (i = nextIndex(staleSlot, len); (e = tab[i]) != null; i = nextIndex(i, len)) { ThreadLocal<?> k = e.get(); //(7)如果key為null,則去掉對value的引用。 if (k == null) { e.value = null; tab[i] = null; size--; } else { int h = k.threadLocalHashCode & (len - 1); if (h != i) { tab[i] = null; while (tab[h] != null) h = nextIndex(h, len); tab[h] = e; } } } return i; }

代碼(4)調用了 Entry 的 clear 方法,實際調用的是父類 WeakReference 的 clear 方法,作用是去掉對 ThreadLocal 的弱引用。

代碼(6)是去掉對 value 的引用,到這里當前線程里面的當前 ThreadLocal 對象的信息被清理完畢了。

代碼(7)從當前元素的下標開始看 table 數組里面的其他元素是否有 key 為 null 的,有則清理。循環退出的條件是遇到 table 里面有 null 的元素。所以這里知道 null 元素后面的 Entry 里面 key 為 null 的元素不會被清理。

總結:

  1.ThreadLocalMap 內部 Entry 中 key 使用的是對 ThreadLocal 對象的弱引用,這為避免內存泄露是一個進步,因為如果是強引用,那么即使其他地方沒有對 ThreadLocal 對象的引用,ThreadLocalMap 中的 ThreadLocal 對象還是不會被回收,而如果是弱引用則這時候 ThreadLocal 引用是會被回收掉的。

  2.但是對於的 value 還是不能被回收,這時候 ThreadLocalMap 里面就會存在 key 為 null 但是 value 不為 null 的 entry 項,雖然 ThreadLocalMap 提供了 set,get,remove 方法在一些時機下會對這些 Entry 項進行清理,但是這是不及時的,也不是每次都會執行的,所以一些情況下還是會發生內存泄露,所以在使用完畢后即使調用 remove 方法才是解決內存泄露的最好辦法。

  3.線程池里面設置了 ThreadLocal 變量一定要記得及時清理,因為線程池里面的核心線程是一直存在的,如果不清理,那么線程池的核心線程的 threadLocals 變量一直會持有 ThreadLocal 變量。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM