碼上快樂

相關內容    簡體    繁體

分布式文件系統FastDFS安裝教程

本文轉載自   查看原文   2018-08-09 20:33   44279    fastdfs

前言

　　FastDFS(Fast Distributed File System)是一款開源輕量級分布式文件系統，本文不講解原理和架構，只是在個人使用部署過程中耗費了好長時間和精力，遇到了很多的坑，於是總結成了一篇詳細的部署文檔分享給大家。

安裝libfastcommon

  1. 獲取libfastcommon安裝包：

    wget https://github.com/happyfish100/libfastcommon/archive/V1.0.38.tar.gz

  2. 解壓安裝包：tar -zxvf V1.0.38.tar.gz

  3. 進入目錄：cd libfastcommon-1.0.38

  4. 執行編譯：./make.sh

  5. 安裝：./make.sh install
    

可能遇到的問題：

-bash: make: command not found -bash: gcc: command not found

解決方案：
debian通過apt-get install gcc make安裝 centos通過yum -y install gcc make安裝

安裝FastDFS

  1. 獲取fdfs安裝包：

    wget https://github.com/happyfish100/fastdfs/archive/V5.11.tar.gz

  2. 解壓安裝包：tar -zxvf V5.11.tar.gz

  3. 進入目錄：cd fastdfs-5.11

  4. 執行編譯：./make.sh

  5. 安裝：./make.sh install
    

  6. 查看可執行命令：ls -la /usr/bin/fdfs*
    

配置Tracker服務

  1. 進入/etc/fdfs目錄，有三個.sample后綴的文件（自動生成的fdfs模板配置文件），通過cp命令拷貝tracker.conf.sample，刪除.sample后綴作為正式文件：
     

  2. 編輯tracker.conf：vi tracker.conf，修改相關參數

    base_path=/home/mm/fastdfs/tracker #tracker存儲data和log的跟路徑，必須提前創建好 port=23000 #tracker默認23000 http.server_port=80 #http端口，需要和nginx相同

  3. 啟動tracker（支持start|stop|restart）：

    /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf start

  4. 查看tracker啟動日志：進入剛剛指定的base_path(/home/mm/fastdfs/tracker)中有個logs目錄，查看tracker.log文件
    

  5. 查看端口情況：netstat -apn|grep fdfs
    

可能遇到的報錯：

/usr/bin/fdfs_trackerd: error while loading shared libraries: libfastcommon.so: cannot open shared object file: No such file or directory 
解決方案：建立libfastcommon.so軟鏈接
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

配置Storage服務

  1. 進入/etc/fdfs目錄，有cp命令拷貝storage.conf.sample，刪除.sample后綴作為正式文件;

  2. 編輯storage.conf：vi storage.conf，修改相關參數：

    base_path=/home/mm/fastdfs/storage #storage存儲data和log的跟路徑，必須提前創建好 port=23000 #storge默認23000，同一個組的storage端口號必須一致 group_name=group1 #默認組名，根據實際情況修改 store_path_count=1 #存儲路徑個數，需要和store_path個數匹配 store_path0=/home/mm/fastdfs/storage #如果為空，則使用base_path tracker_server=10.122.149.211:22122 #配置該storage監聽的tracker的ip和port

  3. 啟動storage（支持start|stop|restart）：

    /usr/bin/fdfs_storaged /etc/fdfs/storage.conf start

  4. 查看storage啟動日志：進入剛剛指定的base_path(/home/mm/fastdfs/storage)中有個logs目錄，查看storage.log文件
    

  5. 此時再查看tracker日志：發現已經開始選舉，並且作為唯一的一個tracker，被選舉為leader
    

  6. 查看端口情況：netstat -apn|grep fdfs
    

  7. 通過monitor來查看storage是否成功綁定：

    /usr/bin/fdfs_monitor /etc/fdfs/storage.conf

    

安裝Nginx和fastdfs-nginx-module模塊

  1. 下載Nginx安裝包

    wget http://nginx.org/download/nginx-1.15.2.tar.gz

  2. 下載fastdfs-nginx-module安裝包

    wget https://github.com/happyfish100/fastdfs-nginx-module/archive/V1.20.tar.gz

  3. 解壓nginx：tar -zxvf nginx-1.15.2.tar.gz

  4. 解壓fastdfs-nginx-module：tar -xvf V1.20.tar.gz

  5. 進入nginx目錄：cd nginx-1.10.1

  6. 安裝依賴的庫

    apt-get update apt-get install libpcre3 libpcre3-dev openssl libssl-dev libperl-dev

  7. 配置，並加載fastdfs-nginx-module模塊：

    ./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/fastdfs-nginx-module-1.20/src/

  8. 編譯安裝：

    make make install

  9. 查看安裝路徑：whereis nginx
    

  10. 啟動、停止：

    cd /usr/local/nginx/sbin/ ./nginx ./nginx -s stop #此方式相當於先查出nginx進程id再使用kill命令強制殺掉進程 ./nginx -s quit #此方式停止步驟是待nginx進程處理任務完畢進行停止 ./nginx -s reload

  11. 驗證啟動狀態：wget "http://127.0.0.1"
    

  12. 查看此時的nginx版本：發現fastdfs模塊已經安裝好了
    

可能的報錯：

/usr/include/fastdfs/fdfs_define.h:15:27: fatal error: common_define.h: No such file or directory 
解決方案：修改fastdfs-nginx-module-1.20/src/config文件，然后重新第7步開始
ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/" CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

配置Nginx和fastdfs-nginx-module模塊

  1. 配置mod-fastdfs.conf，並拷貝到/etc/fdfs文件目錄下

    cd fastdfs-nginx-module-1.20/src/ cp mod_fastdfs.conf /etc/fdfs

  2. 進入/etc/fdfs修改mod-fastdfs.conf：

    base_path=/home/mm/fastdfs tracker_server=10.122.149.211:22122 #tracker的地址 url_have_group_name=true #url是否包含group名稱 storage_server_port=23000 #需要和storage配置的相同 store_path_count=1 #存儲路徑個數，需要和store_path個數匹配 store_path0=/home/mm/fastdfs/storage #文件存儲的位置

  3. 配置nginx，80端口server增加location如圖：

    cd /usr/local/nginx/conf/ vi nginx.conf

    

  4. 最后需要拷貝fastdfs解壓目錄中的http.conf和mime.types：

    cd /usr/local/src/fastdfs-5.11/conf cp mime.types http.conf /etc/fdfs/

FastDFS常用命令測試

上傳文件
  1. 進入/etc/fdfs目錄，有cp命令拷貝client.conf.sample，刪除.sample后綴作為正式文件;

  2. 修改client.conf相關配置：

    base_path=/home/mm/fastdfs/tracker //tracker服務器文件路徑 tracker_server=10.122.149.211:22122 //tracker服務器IP地址和端口號 http.tracker_server_port=80 # tracker服務器的http端口號，必須和tracker的設置對應起來

  3. 新建一個測試文檔1.txt，內容為abc

  4. 命令：

    /usr/bin/fdfs_upload_file <config_file> <local_filename>

  5. 示例：

    /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 1.txt

    

    組名：group1 磁盤：M00 目錄：00/00 文件名稱：CnqV01trmeyAbAN0AAAABLh3frE677.txt

  6. 查看結果，進入storage的data目錄：
    

  7. 通過wget和瀏覽器方式訪問成功：

    wget http://10.122.149.211/group1/M00/00/00/CnqV01trmeyAbAN0AAAABLh3frE677.txt

    

下載文件：

  1. 命令：

    /usr/bin/fdfs_download_file <config_file> <file_id> [local_filename]

  2. 示例：

    /usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/CnqV01trmeyAbAN0AAAABLh3frE677.txt a.txt

  3. 查看結果：
    

刪除文件：

  1. 命令：

    /usr/bin/fdfs_delete_file <config_file> <file_id>

  2. 示例：

    /usr/bin/fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/CnqV01trmeyAbAN0AAAABLh3frE677.txt

  3. 查看結果，進入storage的data目錄文件不存在，通過wget再次獲取404：


免責聲明！

本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。



猜您在找 分布式文件系統FastDFS安裝與配置(單機) 分布式文件系統fastdfs安裝以及python調用 FastDFS分布式文件系統 FastDFS分布式文件系統及源碼解析 學成在線（第8天）FastDFS分布式文件系統 利用Docker來搭建分布式文件系統FastDfs 分布式文件系統FastDFS詳解 go-fastdfs 分布式文件系統搭建 分布式 文件系統(FastDFS/MinIO) Docker - 部署 FastDFS（分布式文件系統）
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM