FastDfs搭建以及Java使用

當前主流情況下都是走雲存儲的，但有些項目非常注重保密性，在這種情況下只能存到私有的服務器上。那么一個文件存儲系統就至關重要了。本篇博客講的是FastDfs的安裝與使用，那么話不多說，開始吧：

一.  首先修改host，因為后續會有很多修改ip的地方，用更改host的方式會方便很多

192.168.1.177 file.xxx.com

如果不修改, 用內網ip即可

 

二. 下載安裝 libfastcommon

1. 下載libfastcommon
wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz

2. 解壓、編譯、安裝
tar -zxvf V1.0.7.tar.gz
cd libfastcommon-1.0.7
./make.sh
./make.sh install

3. libfastcommon.so 安裝到了/usr/lib64/libfastcommon.so，但是FastDFS主程序設置的lib目錄是/usr/local/lib，所以需要創建軟鏈接
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so 

三. 下載安裝FastDFS

1. 下載
wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz

2. 解壓、編譯、安裝
tar -zxvf V5.05.tar.gz
cd fastdfs-5.05
./make.sh
./make.sh install

3. 默認安裝方式安裝后的相應文件與目錄
A、服務腳本：

/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_tracker
B、配置文件（這三個是作者給的樣例配置文件） :

/etc/fdfs/client.conf.sample
/etc/fdfs/storage.conf.sample
/etc/fdfs/tracker.conf.sample

C、命令工具在 /usr/bin/ 目錄下：


（4）FastDFS 服務腳本設置的 bin 目錄是 /usr/local/bin， 但實際命令安裝在 /usr/bin/ 下，所以需要創建軟鏈接

ln -s /usr/bin/fdfs_trackerd   /usr/local/bin
ln -s /usr/bin/fdfs_storaged   /usr/local/bin
ln -s /usr/bin/stop.sh         /usr/local/bin
ln -s /usr/bin/restart.sh      /usr/local/bin

四.  配置FastDFS跟蹤器(Tracker)

1. 進入 /etc/fdfs，復制 FastDFS 跟蹤器樣例配置文件 tracker.conf.sample，並重命名為 tracker.conf
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
vim tracker.conf
	
2. 編輯tracker.conf ，其它的默認即可	
# Tracker 數據和日志目錄地址(根目錄必須存在,子目錄會自動創建)
base_path=/data/fastdfs/tracker

# HTTP 服務端口
http.server_port=80


3. 創建tracker基礎數據目錄，即base_path對應的目錄

# mkdir -p /data/fastdfs/tracker	

4. 防火牆中打開跟蹤端口（默認的22122），沒有防火牆就無需操作。

5. 啟動Tracker

初次成功啟動，會在 /data/fdfsdfs/tracker/ (配置的base_path)下創建 data、logs 兩個目錄。

可以用這種方式啟動
# /etc/init.d/fdfs_trackerd start

也可以用這種方式啟動，前提是上面創建了軟鏈接，后面都用這種方式
# service fdfs_trackerd start
查看 FastDFS Tracker 是否已成功啟動 ，22122端口正在被監聽，則算是Tracker服務安裝成功。

# netstat -unltp|grep fdfs

關閉Tracker命令：

# service fdfs_trackerd stop

6. 設置Tracker開機啟動

# chkconfig fdfs_trackerd on

或者：
# vim /etc/rc.d/rc.local

加入配置：
/etc/init.d/fdfs_trackerd start 


7. tracker server 目錄及文件結構

Tracker服務啟動成功后，會在base_path下創建data、logs兩個目錄。目錄結構如下：

${base_path}
  |__data
  |   |__storage_groups.dat：存儲分組信息
  |   |__storage_servers.dat：存儲服務器列表
  |__logs
  |   |__trackerd.log： tracker server 日志文件 

五.  配置 FastDFS 存儲 (Storage)　　

1. 進入 /etc/fdfs 目錄，復制 FastDFS 存儲器樣例配置文件 storage.conf.sample，並重命名為 storage.conf

cd /etc/fdfs
cp storage.conf.sample storage.conf
vim storage.conf

2. 編輯storage.conf

# Storage 數據和日志目錄地址(根目錄必須存在，子目錄會自動生成)
base_path=/data/fastdfs/storage

# 逐一配置 store_path_count 個路徑，索引號基於 0。
# 如果不配置 store_path0，那它就和 base_path 對應的路徑一樣。
store_path0=/data/fastdfs/file

# tracker_server 的列表 ，會主動連接 tracker_server
# 有多個 tracker server 時，每個 tracker server 寫一行
tracker_server=file.agatha.com:22122

# 訪問端口
http.server_port=80

3. 創建Storage基礎數據目錄，對應base_path目錄

# mkdir -p /data/fastdfs/storage

# 這是配置的store_path0路徑
# mkdir -p /data/fastdfs/file


4. 防火牆中打開存儲器端口（默認的 23000）

5. 啟動 Storage

啟動Storage前確保Tracker是啟動的。初次啟動成功，會在 /data/fastdfs/storage 目錄下創建 data、 logs 兩個目錄。

可以用這種方式啟動
# /etc/init.d/fdfs_storaged start

也可以用這種方式，后面都用這種
# service fdfs_storaged start
查看 Storage 是否成功啟動，23000 端口正在被監聽，就算 Storage 啟動成功。

# netstat -unltp|grep fdfs

關閉Storage命令：

# service fdfs_storaged stop


6. 設置 Storage 開機啟動

# chkconfig fdfs_storaged on

或者：
# vim /etc/rc.d/rc.local
加入配置：
/etc/init.d/fdfs_storaged start


7. Storage 目錄

同 Tracker，Storage 啟動成功后，在base_path 下創建了data、logs目錄，記錄着 Storage Server 的信息。

在 store_path0 目錄下，創建了N*N個子目錄：　　

 

六. 查看通信狀態

查看Storage和Tracker是否在通信：

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf

如果有：ACTIVE，表示成功

　　

七. 文件上傳測試

1. 修改 Tracker 服務器中的客戶端配置文件 

cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf

修改如下配置即可，其它默認。

# Client 的數據和日志目錄
base_path=/data/fastdfs/client

# Tracker端口
tracker_server=file.agatha.com:22122

2. 上傳測試
mkdir -p /data/fastdfs/client

在linux內部執行如下命令上傳 99.jpeg

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 99.jpeg
上傳成功后返回文件ID號：http://file.agatha.com/group1/M00/00/00/wKgBhV8VTlaAGIzvAAdK_-sG-CI65.jpeg

八. nginx ，nginx的安裝就不展開說了，直接說配置吧

1. 修改nginx.conf，訪問文件

在主配置文件下的http{}  server{}中加入:

location /group1/M00 {
    alias /data/fastdfs/file/data;
}

記得 nginx的權限，調整為root

2. FastDFS 配置 Nginx 模塊

這里我暫時沒有配置, 因為我認為不配置也是可以的.

九. Java客戶端使用

1. 加入依賴

<dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>

2. 引入配置文件，java服務連接 fastdfs

# 文件服務器地址
file_server_addr=file.onepass.com:80
# 最大連接數 並發量較大的話可加大該連接數
max_storage_connection=8

## fastdfs為前綴的是FastDFS的配置
fastdfs.connect_timeout_in_seconds=10
fastdfs.network_timeout_in_seconds=30

fastdfs.charset=UTF-8

# token 防盜鏈功能
fastdfs.http_anti_steal_token=true

# 密鑰
fastdfs.http_secret_key=superOak

# TrackerServer port
fastdfs.http_tracker_http_port=80

## Tracker Server, if more than one, separate with ","
fastdfs.tracker_servers=file.onepass.com:22122

3. 客戶端API 使用

前輩封裝的FastDFS Java API
https://github.com/bojiangzhou/lyyzoo-fastdfs-java.git