Docker中搭建FastDFS文件系統(多圖)


關於FastDFS

FastDFS 是以 C 語言開發的一項開源輕量級分布式文件系統,他對文件進行管理,主要功能有:文件存儲,文件同步,文件訪問(文件上傳/下載)等,特別適合以文件為載體的在線服務,如:圖片網站,視頻網站等。

外話:FastDFS 是阿里余慶大神做的一個個人項目,從2008年研發FastDFS開源至今,在一些互聯網創業公司中備受推崇,GitHub開源地址:https://github.com/happyfish100/fastdfs

本文基於Docker搭建,以下是正文內容:

1、搜索鏡像

執行命令:

docker search fastdfs

然后界面會搜出一大堆鏡像,選哪個呢?

老規矩,我們選擇start數最多的准沒錯,什么?start數不放心,怕被掛馬?ok,我們再去鏡像倉庫看一下:

補充: 其實看這些鏡像的描述也能看出一些區別來的,比如 ygqygq2/fastdfs-nginx,該鏡像是整合了 Nginx 的 fastdfs,那么新的問題來了,為什么要整合 Nginx?因為對於 fastdfs 來說,安裝后只能在本機訪問… 我上傳文件肯定是為了能夠訪問的呀,所以為了提供 web 訪問,那么就需要集成 Nginx 了,但是比如就是想自己單獨搞 Nginx… 那么肯定就不會選了嘛,season/fastdfs 鏡像相對純凈些,本文就是基於 season/fastdfs 鏡像的,后面也附帶配置 Nginx…

2、安裝鏡像

執行命令:

docker pull season/fastdfs:1.2

之所以選擇 1.2 版本,防止再次更新后本文不適合 latest 版本,執行截圖如下:

3、創建容器並掛載目錄

在創建容器之前我們先簡單說一下 FastDFS,FastDFS 系統有三個角色:

  1. 跟蹤服務器(Tracker Server):跟蹤服務器,主要做調度工作,起到均衡的作用;負責管理所有的 storage server和 group,每個 storage 在啟動后會連接 Tracker,告知自己所屬 group 等信息,並保持周期性心跳。
  2. 存儲服務器(Storage Server):存儲服務器,主要提供容量和備份服務;以 group 為單位,每個 group 內可以有多台 storage server,數據互為備份。
  3. 客戶端(Client):上傳下載數據的服務器,也就是我們自己的項目所部署在的服務器。

說到這就是想告訴小伙伴,接下來我們可能創建 跟蹤服務器容器存儲服務器容器客戶端容器 這三個容器…

3.1、創建出所需要的目錄

我們先把需要的一些目錄創建出來(數據目錄、數據存儲目錄等),執行命令:

mkdir -p /usr/local/server/fastdfs/tracker/data
mkdir -p /usr/local/server/fastdfs/storage/data
mkdir -p /usr/local/server/fastdfs/storage/path

3.2、創建tracker容器(跟蹤服務器容器)

執行命令:

docker run -id --name tracker \
-p 22122:22122 \
--restart=always --net host \
-v /usr/local/server/fastdfs/tracker/data:/fastdfs/tracker/data \
season/fastdfs:1.2 tracker

再嘮叨一下上方命令:

  • -d:讓容器在后台運行
  • -p:指定容器內部使用的網絡端口映射到我們使用的主機上
  • --name:指定容器創建的名稱
  • -v:容器跟宿主機之間的掛載目錄

3.3、創建storage容器(存儲服務器容器)

執行命令(非最終執行命令,請修改為自己的ip地址):

docker run -id --name storage \
--restart=always --net host \
-v /usr/local/server/fastdfs/data/storage:/fastdfs/store_path \
-e TRACKER_SERVER="10.211.55.4:22122" \
season/fastdfs:1.2 storage

3.4、client測試

兩個容器創建完之后,但此時兩個容器其實並沒有關聯起來,我們進入tracker容器,通過client.conf測試一下:

docker exec -it tracker bash
cd /etc/fdfs/
ls
cat client.conf

輸出的 client.conf 都是默認配置,我們可以找到其中的 track_server 地址:

嘗試執行一下連接:

fdfs_monitor client.conf

然后會得到如下內容:

ERROR - file: ../common/connection_pool.c, line: 84, connect to 192.168.209.121:22122 fail, errno: 110, error info: Connection timed out

也就是在沒有修改client配置之前,默認 tracker 是去連接 192.168.209.121 地址的,那么接下來就是需要去配置client配置文件了。

3.4、修改client.conf配置文件

通過 docker exec -it tracker bash 進入 tracker 容器后不能使用 vi vim 命令,所以干脆將 client.conf 配置文件復制出來,在宿主機修改完再粘貼回去。

執行命令:

docker cp trakcer:/etc/fdfs/client.conf /usr/local/server/fastdfs/

我們通過 docker 指令將配置文件復制到 /usr/local/server/fastdfs/ 目錄。

我們編輯這個文件,修改 tracker_url 地址(vi client.conf):

修改后保存,然后將修改后的文件替換回去。指令命令:

docker cp /usr/local/server/fastdfs/client.conf tracker:/etc/fdfs 

至此,配置文件修改完了,接下來我們創建文件上傳測試一下。

4、文件上傳測試

執行命令,進入 tracker 容器中:

docker exec -it tracker bash

隨便創建一個 txt 文件:

echo "niceyoo" > niceyoo.txt

然后通過 fdfs_upload_file 命令將 niceyoo.txt 文件上傳至服務器:

fdfs_upload_file /etc/fdfs/client.conf niceyoo.txt

如果此時報了如下錯誤:

那么就創建一下這個路徑,沒有的跳過:

mkdir -p /home/yuqing/fastdfs

創建目錄后重新嘗試提交:

我們復制出這個文件名來:group1/M00/00/00/CtM3BF84iz2AWE_JAAAACBfWGpM793.txt,這個名稱后面有用,將用作后面配置nginx時配置訪問文件路徑。

因為我們之前掛載了宿主機的目錄,我們去 cd /usr/local/server/fastdfs 看一下:

cd /usr/local/server/fastdfs/data/storage/data
ls

輸出內容如下:

5、配置Nginx

前面的補充已經提到了,默認上傳的文件是只能在本機訪問的,當然這樣肯定是不行的,所以我們需要配置一下Nginx 來幫我們實現 Web 訪問的效果。

創建nginx目錄:

mkdir -p /usr/local/server/fastdfs/nginx/

將storage容器中的nginx配置文件復制出來:

docker cp storage:/etc/nginx/conf/nginx.conf /usr/local/server/fastdfs/nginx/

修改nginx中的配置:

vi /usr/local/server/fastdfs/nginx/nginx.conf

找到local節點,修改為:

 location / {
    root /fastdfs/store_path/data;
    ngx_fastdfs_module;
 }

相關截圖如下:

接下來就是創建nginx容器,並指向剛剛的配置文件了。

沒有安裝過nginx的小伙伴同樣可以執行如下指令,默認會幫你拉取鏡像然后安裝的。

注意:請修改ip地址后再執行

docker run -id --name fastdfs_nginx \
--restart=always \
-v /usr/local/server/fastdfs/data/storage:/fastdfs/store_path \
-v /usr/local/server/fastdfs/nginx/nginx.conf:/etc/nginx/conf/nginx.conf \
-p 8888:80 \
-e TRACKER_SERVER=10.211.55.4:22122 \
season/fastdfs:1.2 nginx

至此,我們查看一下目前創建以及啟動的容器:

我們測試一下之前上傳的文件 group1/M00/00/00/CtM3BF84iz2AWE_JAAAACBfWGpM793.txt,執行如下命令:

curl -i http://127.0.0.1:8888/group1/M00/00/00/CtM3BF84iz2AWE_JAAAACBfWGpM793.txt

執行結果:

至此,整個過程就搭建成功了,我們通過瀏覽器訪問一下:

搭建完成怎么在項目當中使用呢?

SpringBoot集成FastDFS依賴實現文件上傳

你知道的越多,不知道的就越多,右上角可以關注我的微信公眾號,大家一起成長~


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM