19. 一文搞懂 Go Modules 前世今生及入門使用

本文轉載自查看原文 2020-05-23 08:56 6987 Python

Hi，大家好。

我是明哥，在自己學習 Golang 的這段時間里，我寫了詳細的學習筆記放在我的個人微信公眾號《Go編程時光》，對於 Go 語言，我也算是個初學者，因此寫的東西應該會比較適合剛接觸的同學，如果你也是剛學習 Go 語言，不防關注一下，一起學習，一起成長。

在線博客：http://golang.iswbm.com
Github：github.com/iswbm/GolangCodingTime

在以前，Go 語言的的包依賴管理一直都被大家所詬病，Go官方也在一直在努力為開發者提供更方便易用的包管理方案，從最初的 GOPATH 到 GO VENDOR，再到最新的 GO Modules，雖然走了不少的彎路，但最終還是拿出了 Go Modules 這樣像樣的解決方案。

目前最主流的包依賴管理方式是使用官方推薦的 Go Modules ，這不前段時間 Go 1.14 版本發布，官方正式放話，強烈推薦你使用 Go Modules，並且有自信可以用於生產中。

本文會大篇幅的講解 Go Modules 的使用，但是在那之前，我仍然會簡要介紹一下前兩個解決方案 GOPATH 和 go vendor 到底是怎么回事？我認為這是有必要的，因為只有了解它的發展歷程，才能知道 Go Modules 的到來是有多么的不容易，多么的意義非凡。

1. 最古老的 GOPATH

GOPATH 應該很多人都很眼熟了，之前在配置環境的時候，都配置過吧？

你可以將其理解為工作目錄，在這個工作目錄下，通常有如下的目錄結構

每個目錄存放的文件，都不相同

bin：存放編譯后生成的二進制可執行文件
pkg：存放編譯后生成的 .a 文件
src：存放項目的源代碼，可以是你自己寫的代碼，也可以是你 go get 下載的包

將你的包或者別人的包全部放在 $GOPATH/src 目錄下進行管理的方式，我們稱之為 GOPATH 模式。

在這個模式下，使用 go install 時，生成的可執行文件會放在 $GOPATH/bin 下

如果你安裝的是一個庫，則會生成 .a 文件到 $GOPATH/pkg 下對應的平台目錄中（由 GOOS 和 GOARCH 組合而成），生成 .a 為后綴的文件。

GOOS，表示的是目標操作系統，有 darwin（Mac），linux，windows，android，netbsd，openbsd，solaris，plan9 等

而 GOARCH，表示目標架構，常見的有 arm，amd64 等

這兩個都是 go env 里的變量，你可以通過 go env 變量名 進行查看

至此，你可能不會覺得上面的方案會產生什么樣的問題，直到你開始真正使用 GOPATH 去開發程序，就不得不開始面臨各種各樣的問題，其中最嚴重的就是版本管理問題，因為 GOPATH 根本沒有版本的概念。

以下幾點是你使用 GOPATH 一定會碰到的問題：

你無法在你的項目中，使用指定版本的包，因為不同版本的包的導入方法也都一樣
其他人運行你的開發的程序時，無法保證他下載的包版本是你所期望的版本，當對方使用了其他版本，有可能導致程序無法正常運行
在本地，一個包只能保留一個版本，意味着你在本地開發的所有項目，都得用同一個版本的包，這幾乎是不可能的。

2. go vendor 模式的過渡

為了解決 GOPATH 方案下不同項目下無法使用多個版本庫的問題，Go v1.5 開始支持 vendor 。

以前使用 GOPATH 的時候，所有的項目都共享一個 GOPATH，需要導入依賴的時候，都來這里找，正所謂一山不容二虎，在 GOPATH 模式下只能有一個版本的第三方庫。

解決的思路就是，在每個項目下都創建一個 vendor 目錄，每個項目所需的依賴都只會下載到自己vendor目錄下，項目之間的依賴包互不影響。在編譯時，v1.5 的 Go 在你設置了開啟 GO15VENDOREXPERIMENT=1 （注：這個變量在 v1.6 版本默認為1，但是在 v1.7 后，已去掉該環境變量，默認開啟 vendor 特性，無需你手動設置）后，會提升 vendor 目錄的依賴包搜索路徑的優先級（相較於 GOPATH）。

其搜索包的優先級順序，由高到低是這樣的

當前包下的 vendor 目錄
向上級目錄查找，直到找到 src 下的 vendor 目錄
在 GOROOT 目錄下查找
在 GOPATH 下面查找依賴包

雖然這個方案解決了一些問題，但是解決得並不完美。

如果多個項目用到了同一個包的同一個版本，這個包會存在於該機器上的不同目錄下，不僅對磁盤空間是一種浪費，而且沒法對第三方包進行集中式的管理（分散在各個角落）。
並且如果要分享開源你的項目，你需要將你的所有的依賴包悉數上傳，別人使用的時候，除了你的項目源碼外，還有所有的依賴包全部下載下來，才能保證別人使用的時候，不會因為版本問題導致項目不能如你預期那樣正常運行。

這些看似不是問題的問題，會給我們的開發使用過程變得非常難受，雖然我是初學者，還未使用過 go vendor，但能有很明顯的預感，這個方案照樣會另我崩潰。

3. go mod 的橫空出世

go modules 在 v1.11 版本正式推出，在最新發布的 v1.14 版本中，官方正式發話，稱其已經足夠成熟，可以應用於生產上。

從 v1.11 開始，go env 多了個環境變量： GO111MODULE ，這里的 111，其實就是 v1.11 的象征標志， go 里好像很喜歡這樣的命名方式，比如當初 vendor 出現的時候，也多了個 GO15VENDOREXPERIMENT 環境變量，其中 15，表示的vendor 是在 v1.5 時才誕生的。

GO111MODULE 是一個開關，通過它可以開啟或關閉 go mod 模式。

它有三個可選值：off、on、auto，默認值是auto。

GO111MODULE=off禁用模塊支持，編譯時會從GOPATH和vendor文件夾中查找包。
GO111MODULE=on啟用模塊支持，編譯時會忽略GOPATH和vendor文件夾，只根據 go.mod下載依賴。
GO111MODULE=auto，當項目在$GOPATH/src 外且項目根目錄有go.mod文件時，自動開啟模塊支持。

go mod 出現后， GOPATH（肯定沒人使用了）和 GOVENDOR 將會且正在被逐步淘汰，但是若你的項目仍然要使用那些即將過時的包依賴管理方案，請注意將 GO111MODULE 置為 off。

具體怎么設置呢？可以使用 go env 的命令，如我要開啟 go mod ，就使用這條命令

$ go env -w GO111MODULE="on"

4. go mod 依賴的管理

接下來，來演示一下 go modules 是如何來管理包依賴的。

go mod 不再依靠 $GOPATH，使得它可以脫離 GOPATH 來創建項目，於是我們在家目錄下創建一個 go_test 的目錄，用來創建我的項目，詳細操作如下：

接下來，進入項目目錄，執行如下命令進行 go modules 的初始化

接下來很重要的一點，我們要看看 go install 把下載的包安裝到哪里了？

上面我們觀察到，在使用 go modules 模式后，項目目錄下會多生成兩個文件也就是 go.mod 和 go.sum 。

這兩個文件是 go modules 的核心所在，這里不得不好好介紹一下。

go.mod 文件

go.mod 的內容比較容易理解

第一行：模塊的引用路徑
第二行：項目使用的 go 版本
第三行：項目所需的直接依賴包及其版本

在實際應用上，你會看見更復雜的 go.mod 文件，比如下面這樣

module github.com/BingmingWong/module-test

go 1.14

require (
    example.com/apple v0.1.2
    example.com/banana v1.2.3
    example.com/banana/v2 v2.3.4
    example.com/pear // indirect
    example.com/strawberry // incompatible
)

exclude example.com/banana v1.2.4
replace（
    golang.org/x/crypto v0.0.0-20180820150726-614d502a4dac => github.com/golang/crypto v0.0.0-20180820150726-614d502a4dac
    golang.org/x/net v0.0.0-20180821023952-922f4815f713 => github.com/golang/net v0.0.0-20180826012351-8a410e7b638d
    golang.org/x/text v0.3.0 => github.com/golang/text v0.3.0
)

主要是多出了兩個 flag：

exclude：忽略指定版本的依賴包
replace：由於在國內訪問golang.org/x的各個包都需要f.q，你可以在go.mod中使用replace替換成github上對應的庫。

go.sum 文件

反觀 go.sum 文件，就比較復雜了，密密麻麻的。

可以看到，內容雖然多，但是也不難理解

每一行都是由 模塊路徑，模塊版本，哈希檢驗值 組成，其中哈希檢驗值是用來保證當前緩存的模塊不會被篡改。hash 是以h1:開頭的字符串，表示生成checksum的算法是第一版的hash算法（sha256）。

值得注意的是，為什么有的包只有一行

<module> <version>/go.mod <hash>

而有的包卻有兩行呢

<module> <version> <hash>
<module> <version>/go.mod <hash>

那些有兩行的包，區別就在於 hash 值不一行，一個是 h1:hash，一個是 go.mod h1:hash

而 h1:hash 和 go.mod h1:hash兩者，要不就是同時存在，要不就是只存在 go.mod h1:hash。那什么情況下會不存在 h1:hash 呢，就是當 Go 認為肯定用不到某個模塊版本的時候就會省略它的 h1 hash，就會出現不存在 h1 hash，只存在 go.mod h1:hash 的情況。[引用自 3]

go.mod 和 go.sum 是 go modules 版本管理的指導性文件，因此 go.mod 和 go.sum 文件都應該提交到你的 Git 倉庫中去，避免其他人使用你寫項目時，重新生成的go.mod 和 go.sum 與你開發的基准版本的不一致。

5. go mod 命令的使用

go mod init：初始化go mod，生成go.mod文件，后可接參數指定 module 名，上面已經演示過。
go mod download：手動觸發下載依賴包到本地cache（默認為$GOPATH/pkg/mod目錄）
go mod graph：打印項目的模塊依賴結構

go mod tidy ：添加缺少的包，且刪除無用的包
go mod verify ：校驗模塊是否被篡改過
go mod why：查看為什么需要依賴
go mod vendor ：導出項目所有依賴到vendor下

go mod edit ：編輯go.mod文件，接 -fmt 參數格式化 go.mod 文件，接 -require=golang.org/x/text 添加依賴，接 -droprequire=golang.org/x/text 刪除依賴，詳情可參考 go help mod edit

go list -m -json all：以 json 的方式打印依賴詳情

如何給項目添加依賴（寫進 go.mod）呢？

有兩種方法：

你只要在項目中有 import，然后 go build 就會 go module 就會自動下載並添加。
自己手工使用 go get 下載安裝后，會自動寫入 go.mod 。

7. 總結寫在最后

如果讓我用一段話來評價 GOPATH 和 go vendor，我會說

GOPATH 做為 Golang 的第一個包管理模式，只能保證你能用，但不保證好用，而 go vendor 解決了 GOPATH 忽視包版的本管理，保證好用，但是還不夠好用，直到 go mod 的推出后，才使 Golang 包的依賴管理有了一個能讓 Gopher 都統一比較滿意的方案，達到了能用且好用的標准。

如果是剛開始學習 Golang ，那么 GOPATH 和 go vendor 可以做適當了解，不必深入研究，除非你要接手的項目由於一些歷史原因仍然在使用 go vender 械管理，除此之外，任何 Gopher 應該從此刻就投入 go modules 的懷抱。

以上是我在這幾天的學習總結，希望對還未入門階段的你，有所幫助。另外，本篇文章如有寫得不對的，請后台批評指正，以免誤導其他朋友，非常感謝。