Golang package輕量級KV數據緩存——go-cache源碼分析


作者:Moon-Light-Dream
出處:https://www.cnblogs.com/Moon-Light-Dream/
轉載:歡迎轉載,但未經作者同意,必須保留此段聲明;必須在文章中給出原文連接;否則必究法律責任

什么是go-cache

KV存儲引擎有很多,常用的如redis,rocksdb等,如果在實際使用中只是在內存中實現一個簡單的kv緩存,使用上述引擎就太大費周章了。在Golang中可以使用go-cache這個package實現一個輕量級基於內存的kv存儲或緩存。GitHub源碼地址是:https://github.com/patrickmn/go-cache
go-cache這個包實際上是在內存中實現了一個線程安全的map[string]interface{},可以將任何類型的對象作為value,不需要通過網絡序列化或傳輸數據,適用於單機應用。對於每組KV數據可以設置不同的TTL(也可以永久存儲),並可以自動實現過期清理。
在使用時一般都是將go-cache作為數據緩存來使用,而不是持久性的數據存儲。對於停機后快速恢復的場景,go-cache支持將緩存數據保存到文件,恢復時從文件中load數據加載到內存。

如何使用go-cache

常用接口分析

對於數據庫的基本操作,無外乎關心的CRUD(增刪改查),對應到go-cache中的接口如下:

  • 創建對象:在使用前需要先創建cache對象

    1. func New(defaultExpiration, cleanupInterval time.Duration) *Cache:指定默認有效時間和清除間隔,創建cache對象。
      • 如果defaultExpiration<1或是NoExpiration,kv中的數據不會被清理,必須手動調用接口刪除。
      • 如果cleanupInterval<1,不會自動觸發清理邏輯,要手動觸發c.DeleteExpired()。
    2. func NewFrom(defaultExpiration, cleanupInterval time.Duration, items map[string]Item) *Cache:與上面接口的不同是,入參增加了一個map,可以將已有數據按格式構造好,直接創建cache。
  • C(Create):增加一條數據,go-cache中有幾個接口都能實現新增的功能,但使用場景不同

    1. func (c Cache) Add(k string, x interface{}, d time.Duration) error:只有當key不存在或key對應的value已經過期時,可以增加成功;否則,會返回error。
    2. func (c Cache) Set(k string, x interface{}, d time.Duration):在cache中增加一條kv記錄。
      • 如果key不存在,增加一個kv記錄;如果key已經存在,用新的value覆蓋舊的value。
      • 對於有效時間d,如果是0(DefaultExpiration)使用默認有效時間;如果是-1(NoExpiration),表示沒有過期時間。
    3. func (c Cache) SetDefault(k string, x interface{}):與Set用法一樣,只是這里的TTL使用默認有效時間。
  • R(Read):只支持按key進行讀取

    1. func (c Cache) Get(k string) (interface{}, bool) :通過key獲取value,如果cache中沒有key,返回的value為nil,同時返回一個bool類型的參數表示key是否存在。
    2. func (c Cache) GetWithExpiration(k string) (interface{}, time.Time, bool):與Get接口的區別是,返回參數中增加了key有效期的信息,如果是不會過期的key,返回的是time.Time類型的零值。
  • U(Update):按key進行更新

    1. 直接使用Set接口,上面提到如果key已經存在會用新的value覆蓋舊的value,也可以達到更新的效果。
    2. func (c Cache) Replace(k string, x interface{}, d time.Duration) error:如果key存在且為過期,將對應value更新為新的值;否則返回error。
    3. func (c Cache) Decrement(k string, n int64) error:對於cache中value是int, int8, int16, int32, int64, uintptr, uint,uint8, uint32, or uint64, float32,float64這些類型記錄,可以使用該接口,將value值減n。如果key不存在或value不是上述類型,會返回error。
    4. DecrementXXX:對於Decrement接口中提到的各種類型,還有對應的接口來處理,同時這些接口可以得到value變化后的結果。如func (c *cache) DecrementInt8(k string, n int8) (int8, error),從返回值中可以獲取到value-n后的結果。
    5. func (c Cache) Increment(k string, n int64) error:使用方法與Decrement相同,將key對應的value加n。
    6. IncrementXXX:使用方法與DecrementXXX相同。
  • D(Delete)

    1. func (c Cache) Delete(k string):按照key刪除記錄,如果key不存在直接忽略,不會報錯。
    2. func (c Cache) DeleteExpired():在cache中刪除所有已經過期的記錄。cache在聲明的時候會指定自動清理的時間間隔,使用者也可以通過這個接口手動觸發。
    3. func (c Cache) Flush():將cache清空,刪除所有記錄。
  • 其他接口:

    1. func (c Cache) ItemCount() int:返回cache中的記錄數量。需要注意的是,返回的數值可能會比實際能獲取到的數值大,對於已經過期但還沒有即使清理的記錄也會被統計。
    2. func (c *cache) OnEvicted(f func(string, interface{})):設置一個回調函數(可選項),當一條記錄從cache中刪除(使用者主動delete或cache自助清理過期記錄)時,調用該函數。設置為nil關閉操作。

安裝go-cache包

介紹了go-cache的常用接口,接下來從代碼中看看如何使用。在coding前需要安裝go-cache,命令如下。

go get github.com/patrickmn/go-cache

一個Demo

如何在golang中使用上述接口實現kv數據庫的增刪改查,接下來看一個demo。其他更多接口的用法和更詳細的說明,可以參考GoDoc

import (
	"fmt"
	"time"
	
	"github.com/patrickmn/go-cache" // 使用前先import包
)

func main() {
	// 創建一個cache對象,默認ttl 5分鍾,每10分鍾對過期數據進行一次清理
	c := cache.New(5*time.Minute, 10*time.Minute)

	// Set一個KV,key是"foo",value是"bar"
	// TTL是默認值(上面創建對象的入參,也可以設置不同的值)5分鍾
	c.Set("foo", "bar", cache.DefaultExpiration)

	// Set了一個沒有TTL的KV,只有調用delete接口指定key時才會刪除
	c.Set("baz", 42, cache.NoExpiration)

	// 從cache中獲取key對應的value
	foo, found := c.Get("foo")
	if found {
		fmt.Println(foo)
	}

	// 如果想提高性能,存儲指針類型的值
	c.Set("foo", &MyStruct, cache.DefaultExpiration)
	if x, found := c.Get("foo"); found {
		foo := x.(*MyStruct)
			// ...
	}
}

源碼分析

1. 常量:內部定義的兩個常量`NoExpiration`和`DefaultExpiration`,可以作為上面接口中的入參,`NoExpiration`表示沒有設置有效時間,`DefaultExpiration`表示使用New()或NewFrom()創建cache對象時傳入的默認有效時間。
const (
	NoExpiration time.Duration = -1
	DefaultExpiration time.Duration = 0
)
2.  Item:cache中存儲的value類型,Object是真正的值,Expiration表示過期時間。可以使用Item的```Expired()```接口確定是否到期,實現方式是過比較當前時間和Item設置的到期時間來判斷是否過期。
type Item struct {
	Object     interface{}
	Expiration int64
}

func (item Item) Expired() bool {
	if item.Expiration == 0 {
		return false
	}
	return time.Now().UnixNano() > item.Expiration
}
3. cache:go-cache的核心數據結構,其中定義了每條記錄的默認過期時間,底層的存儲結構等信息。
type cache struct {
	defaultExpiration time.Duration              // 默認過期時間
	items             map[string]Item            // 底層存儲結構,使用map實現 
	mu                sync.RWMutex               // map本身非線程安全,操作時需要加鎖
	onEvicted         func(string, interface{})  // 回調函數,當記錄被刪除時觸發相應操作
	janitor           *janitor                   // 用於定時輪詢失效的key
}
4. janitor:用於定時輪詢失效的key,其中定義了輪詢的周期和一個無緩存的channel,用來接收結束信息。
type janitor struct {
	Interval time.Duration // 定時輪詢周期
	stop     chan bool     // 用來接收結束信息
}

func (j *janitor) Run(c *cache) {
	ticker := time.NewTicker(j.Interval) // 創建一個timeTicker定時觸發
	for {
		select {
		case <-ticker.C:
			c.DeleteExpired()            // 調用DeleteExpired接口處理刪除過期記錄
		case <-j.stop:
			ticker.Stop()
			return
		}
	}
}

**對於janitor的處理,這里使用的技巧值得學習 **,下面這段代碼是在New() cache對象時,會同時開啟一個goroutine跑janitor,在run之后可以看到做了runtime.SetFinalizer的處理,這樣處理了可能存在的內存泄漏問題。

func stopJanitor(c *Cache) {
	c.janitor.stop <- true
}

func newCacheWithJanitor(de time.Duration, ci time.Duration, m map[string]Item) *Cache {
	c := newCache(de, m)
	// This trick ensures that the janitor goroutine (which--granted it
	// was enabled--is running DeleteExpired on c forever) does not keep
	// the returned C object from being garbage collected. When it is
	// garbage collected, the finalizer stops the janitor goroutine, after
	// which c can be collected.
	C := &Cache{c}
	if ci > 0 {
		runJanitor(c, ci)
		runtime.SetFinalizer(C, stopJanitor)
	}
	return C
}

可能的泄漏場景如下,使用者創建了一個cache對象,在使用后置為nil,在使用者看來在gc的時候會被回收,但是因為有goroutine在引用,在gc的時候不會被回收,因此導致了內存泄漏。

    c := cache.New()
    // do some operation
    c = nil

解決方案可以增加Close接口,在使用后調用Close接口,通過channel傳遞信息結束goroutine,但如果使用者在使用后忘了調用Close接口,還是會造成內存泄漏。
另外一種解決方法是使用runtime.SetFinalizer,不需要用戶顯式關閉, gc在檢查C這個對象沒有引用之后, gc會執行關聯的SetFinalizer函數,主動終止goroutine,並取消對象C與SetFinalizer函數的關聯關系。這樣下次gc時,對象C沒有任何引用,就可以被gc回收了。

總結

  1. go-cache的源碼代碼里很小,代碼結構和處理邏輯都比較簡單,可以作為golang新手閱讀的很好的素材。
  2. 對於單機輕量級的內存緩存如果僅從功能實現角度考慮,go-cache是一個不錯的選擇,使用簡單。
  3. 但在實際使用中需要注意:
    • go-cache沒有對內存使用大小或存儲數量進行限制,可能會造成內存峰值較高;
    • go-cache中存儲的value盡量使用指針類型,相比於存儲對象,不僅在性能上會提高,在內存占用上也會有優勢。由於golang的gc機制,map在擴容后原來占用的內存不會立刻釋放,因此如果value存儲的是對象會造成占用大量內存無法釋放。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM