新聞中心
基本概述
FastDFS是一款類Google FS的開源分布式文件系統(tǒng),它用純C語言實現(xiàn),支持Linux、FreeBSD、AIX等UNIX系統(tǒng)。它只能通過專有API對文件進行存取訪問,不支持POSIX接口方式,不能mount使用。準確地講,Google FS以及FastDFS、mogileFS、HDFS、TFS等類Google FS都不是系統(tǒng)級的分布式文件系統(tǒng),而是應用級的分布式文件存儲服務。
FastDFS集群中的Tracker server也可以有多臺,Tracker server和Storage server均不存在單點問題。Tracker server之間是對等關(guān)系,組內(nèi)的Storage server之間也是對等關(guān)系。傳統(tǒng)的Master-Slave結(jié)構(gòu)中的Master是單點,寫操作僅針對Master。如果Master失效,需要將Slave提升為Master,實現(xiàn)邏輯會比較復雜。和Master-Slave結(jié)構(gòu)相比,對等結(jié)構(gòu)中所有結(jié)點的地位是相同的,每個結(jié)點都是Master,不存在單點問題。
基本結(jié)構(gòu)圖
在卷中增加服務器時,同步已有的文件由系統(tǒng)自動完成,同步完成后,系統(tǒng)自動將新增服務器切換到線上提供服務。
基本實驗部署
1、實驗準備
名稱 | 角色 | IP地址 |
---|---|---|
centos7-1 | tracker | 192.168.45.135 |
centos7-2 | storage+nginx | 192.168.45.132 |
實驗軟件包提取碼
鏈接:https://pan.baidu.com/s/1_Xs09mdST6VNLue11dqhyQ
提取碼:9ql5
2、開始安裝
修改兩臺服務器的名稱
一臺改為tracker,一臺改為storage
hostnamectl set-hostname tracker storage
su
安裝基本環(huán)境包
yum -y install libevent libevent-devel perl make gcc zlib zlib-devel pcre pcre-devel gcc-c++ openssl-devel
安裝libfastcommon服務(所有節(jié)點均進行安裝)
mount.cifs //192.168.100.3/lzp /mnt
#安裝libfastcommon服務
cd /mnt/fastDFS/
tar zxvf libfastcommon-1.0.39.tar.gz -C /opt
cd /opt/libfastcommon-1.0.39/
#編譯安裝并建立軟鏈接以方便系統(tǒng)識別
./make.sh && ./make.sh install
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
安裝FastDFS服務(所有節(jié)點均進行安裝)
cd /mnt/fastDFS/
tar zxvf fastdfs-5.11.tar.gz -C /opt
#編譯安裝
cd /opt/fastdfs-5.11/
./make.sh && ./make.sh install
cd /etc/fdfs/
cp tracker.conf.sample tracker.conf
cp storage.conf.sample storage.conf
cp client.conf.sample client.conf
tracker監(jiān)控配置
# 建立數(shù)據(jù)文件、日志文件存放目錄
[root@tracker ~]# mkdir -m 755 -p /opt/fastdfs
修改tracker配置文件
[root@tracker ~]# vim /etc/fdfs/tracker.conf
#修改以下配置
#port=22122 //tracker服務默認端口22122即可
base_path=/opt/fastdfs //22行tracker存儲data和log的跟路徑,必須提前創(chuàng)建好tracker存儲data和log的跟路徑,必須提前創(chuàng)建好
#http.server_port=8080 //tracker服務器上啟動http服務進程,沒裝忽略
#開啟服務
fdfs_trackerd /etc/fdfs/tracker.conf start
#設(shè)置開機自啟
[root@tracker ~]# vim /etc/rc.local
#末行添加
fdfs_trackerd /etc/fdfs/tracker.conf start
#關(guān)閉防火墻和安全功能
[root@tracker ~]# systemctl stop firewalld
[root@tracker ~]# setenforce 0
storage服務端修改
#建立數(shù)據(jù)文件、日志文件存放目錄
[root@storage ~]# mkdir -m 755 -p /opt/fastdfs
修改storage配置文件
[root@storage ~]# vim /etc/fdfs/storage.conf
#修改以下配置
group_name=group1 //默認組名,根據(jù)實際情況修改
port=23000 //storge默認23000,同一個組的storage端口號必須一致
base_path=/opt/fastdfs //storage日志文件的根路徑
store_path_count=1 //與下面路徑個數(shù)相同,默認為1
store_path0=/opt/fastdfs //109提供的存儲路徑(默認與日志文件存放在一起)
tracker_server=192.168.45.135:22122 //自己的tracker服務器IP(重點?。。。?http.server_port=80 //http訪問文件的端口默認為8888,nginx中配置的監(jiān)聽端口保持一致
開啟服務并設(shè)置開機自啟
#開啟服務(命令支持start|stop|restart)
[root@storage ~]# fdfs_storaged /etc/fdfs/storage.conf start
[root@storage ~]# netstat -atnp | grep 23000
tcp 0 0 0.0.0.0:23000 0.0.0.0:* LISTEN 40430/fdfs_storaged
#設(shè)置開機自啟
[root@storage ~]# vim /etc/rc.local
#末行添加
fdfs_storaged /etc/fdfs/storage.conf start
[root@storage ~]# systemctl stop firewalld
[root@storage ~]# setenforce 0
檢查是否與tracker監(jiān)控端關(guān)聯(lián)成功
fdfs_monitor /etc/fdfs/storage.conf
安裝nginx服務(storage:192.168.45.132)
這里為了減少虛擬機開啟的數(shù)量,就在storage端進行nginx的安裝
cd /mnt/fastDFS/
[root@storage fastDFS]# tar zxvf nginx-1.12.0.tar.gz -C /opt
tar zxvf fastdfs-nginx-module-1.20.tar.gz -C /opt
# 修改/opt/fastdfs-nginx-module-1.20/src/config文件
[root@storage fastDFS]# vim /opt/fastdfs-nginx-module-1.20/src/config
ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
#編譯安裝
cd /opt/nginx-1.12.0/
[root@storage nginx-1.12.0]# ./configure \
--prefix=/usr/local/nginx \
--add-module=/opt/fastdfs-nginx-module-1.20/src/
make && make install
cd /opt/fastdfs-nginx-module-1.20/src
cp mod_fastdfs.conf /etc/fdfs/
#修改fastdfs-nginx-module模塊配置文件mod-fasts.conf
[root@storage nginx-1.12.0]# cd /etc/fdfs
[root@storage fdfs]# vim mod_fastdfs.conf
#檢查一下配置
base_path=/opt/fastdfs //存放數(shù)據(jù)文件、日志的路徑
tracker_server=192.168.45.135/:22122 //tracker端的地址(重點?。。。?url_have_group_name = true //url是否包含group名稱
storage_server_port=23000 //需要和storage配置的相同
store_path_count=1 //存儲路徑個數(shù),需要和store_path個數(shù)匹配
store_path0=/opt/fastdfs //62行文件存儲的位置
#修改nginx配置文件
[root@storage fdfs]# vim /usr/local/nginx/conf/nginx.conf
#server中空行處添加
location ~/M00 {
root /opt/fastdfs/data;
ngx_fastdfs_module;
}
#創(chuàng)建軟鏈接
[root@localhost ~]# ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/
#檢車nginx配置文件
[root@localhost ~]# nginx -t
nginx: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
nginx: configuration file /usr/local/nginx/conf/nginx.conf test is successful
#啟動nginx
[root@localhost ~]# nginx
#拷貝fastdfs解壓目錄中的http.conf和mime.types不做這步可能會導致報錯
[root@storage fdfs]# cd /opt/fastdfs-5.11/conf/
[root@storage conf]# cp mime.types http.conf /etc/fdfs/
修改storage端
#修改配置文件
[root@storage ~]# vim /etc/fdfs/client.conf
#檢查以下配置
base_path=/opt/fastdfs //tracker服務器文件路徑
tracker_server=192.168.45.135:22122 //tracker服務器IP地址和端口號
http.tracker_server_port=8080 // tracker服務器的http端口號,必須和
上傳測試文件命令:
/usr/bin/fdfs_upload_file <config_file> <local_filename>
命令演示:
[root@localhost mnt]# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 1.jpg
group1/M00/00/00/wKgthF4AKVmAY9WYABIrwU4wXNs537.jpg
下載文件命令:
/usr/bin/fdfs_download_file <config_file> <file_id> [local_filename]
示例
/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.jpg test2.jpg**
刪除文件命令:
/usr/bin/fdfs_delete_file <config_file> <file_id>
實例:
fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.jpg
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
名稱欄目:FasterDFS的安裝配置-創(chuàng)新互聯(lián)
鏈接URL:http://www.dlmjj.cn/article/deppoe.html