FastDFS集群版安装
说明
1个监控节点、2个存储节点
| 服务器 | 说明 |
|---|---|
| 192.168.2.8 | 监控节点 |
| 192.168.2.9 | 存储节点1，group1 |
| 192.168.2.10 | 存储节点1、group2 |
部署步骤
一、安装监控tracker
yum -y install gcc automake autoconf libtool make gcc-c++ pcre* zlib openssl openssl-devel
将以下zip文件上传到/root目录下
安装libfastcommon
cd /root/
unzip fdfs.zip
cd fdfs
tar -zxvf V1.0.7
cd libfastcommon-1.0.7/
./make.sh
./make.sh install
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
cd ..
rm -rf libfastcommon-1.0.7
安装fdfs
tar -zxvf V5.05
cd fastdfs-5.05/
./make.sh
./make.sh install
配置fdfs
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
vi tracker.conf
disabled=false #启用配置文件
port=22122 #设置tracker的端口号
base_path=/tracker #设置tracker的数据文件和日志目录（需要提前创建，如更改需要更改以下创 建文件夹语句)
http.server_port=8080 #设置http端口号
mkdir -p /tracker
/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart
二、安装监控stroage
yum -y install gcc automake autoconf libtool make gcc-c++ pcre* zlib openssl openssl-devel
将以下zip文件上传到/root目录下
安装libfastcommon
cd /root/
unzip fdfs.zip
cd fdfs
tar -zxvf V1.0.7
cd libfastcommon-1.0.7/
./make.sh
./make.sh install
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
cd ..
rm -rf libfastcommon-1.0.7
安装fdfs
tar -zxvf V5.05
cd fastdfs-5.05/
./make.sh
./make.sh install
配置fdfs
cd /etc/fdfs
cp storage.conf.sample storage.conf
vi storage.conf
disabled=false #启用配置文件
group_name=group1 #组名，根据实际情况修改
port=23000 #设置storage的端口号
base_path=/storage #设置storage的日志目录（需预先创建）
store_path_count=1 #存储路径个数，需要和
store_path个数匹配store_path0=/storage #存储路径
tracker_server=192.168.2.8:22122 #tracker服务器的IP地址和端口号
http.server_port=8080 #设置http端口号
mkdir -p /storage
/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart
/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
可以看到192.168.2.9 ACTIVE即可确认storage运行正常。
以上步骤在所有storage 机器上安装并且确认运行正常，注意配置文件中group名参数需要根据实际情况配。本实力group的是这样分配的
group1：192.168.2.9
group2：192.168.2.10
三、storage安装nginx
cd /root/fdfs
ln -s /usr/include/fastcommon /usr/local/include/
ln -s /usr/include/fastdfs /usr/local/include/
tar -zxvf fastdfs-nginx-module_v1.16.tar.gz
tar -zxvf nginx-1.9.5.tar.gz
/bin/cp /root/fdfs/fastdfs-5.05/conf/http.conf /etc/fdfs
/bin/cp /root/fdfs/fastdfs-5.05/conf/mime.types /etc/fdfs
cd nginx-1.9.5
./configure --prefix=/usr/local/nginx/nginx --add-module=/root/fdfs/fastdfs-nginx-module/src/
make
make install
cp /root/fdfs/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
修改nginx如下图配置文件
vi /usr/local/nginx/nginx/conf/nginx.conf
将server段中的listen端口号改为8080：
listen 8080;
在server段中添加：
location ~/group[1-2]/M00 {
root /storage/data;
ngx_fastdfs_module;
}
如下图
配置storage信息
vi /etc/fdfs/mod_fastdfs.conf
base_path=/storage #保存日志目录
tracker_server=192.168.2.8:22122 #tracker服务器的IP地址以及端口
storage_server_port=23000 #storage服务器的端口号
group_name=group1 #当前服务器的group名
url_have_group_name = true #文件url中是否有group名
store_path_count=1 #存储路径个数，需要和store_path个数匹配
store_path0=/storage #存储路径
group_count = 2 #设置组的个数
在末尾增加2个组的具体信息：
[group1]
group_name=group1
storage_server_port=23000
store_path_count=1
store_path0=/storage
[group2]
group_name=group2
storage_server_port=23000
store_path_count=1
store_path0=/storage
ln -s /storage/data /storage/data/M00
ll /storage/data/M00/
/usr/local/nginx/nginx/sbin/nginx
在浏览器中访问http://192.168.2.9:8080 出现如下图
四、tracker安装nginx
cd /root/fdfs
tar -xvf ngx_cache_purge-2.3.tar
tar -zxvf nginx-1.9.5.tar.gz
cd nginx-1.9.5
./configure --prefix=/usr/local/nginx/nginx --add-module=/root/fdfs/ngx_cache_purge-2.3
make
make install
mkdir -p /var/cache/nginx/proxy_cache/tmp
vi /usr/local/nginx/nginx/conf/nginx.conf
参考如下配置
worker_processes 4; #根据CPU核心数而定
events {
worker_connections 65535; #最大链接数
use epoll; #新版本的Linux可使用epoll加快处理性能
}
http {
#设置缓存参数
server_names_hash_bucket_size 128;
client_header_buffer_size 32k;
large_client_header_buffers 4 32k;
client_max_body_size 300m;
tcp_nopush on;
proxy_redirect off;
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_connect_timeout 90;
proxy_send_timeout 90;
proxy_read_timeout 90;
proxy_buffer_size 16k;
proxy_buffers 4 64k;
proxy_busy_buffers_size 128k;
proxy_temp_file_write_size 128k;
#设置缓存存储路径、存储方式、分配内存大小、磁盘最大空间、缓存期限
proxy_cache_path /var/cache/nginx/proxy_cache levels=1:2 keys_zone=http-cache:500m max_size=10g inactive=30d;
proxy_temp_path /var/cache/nginx/proxy_cache/tmp;
#设置group1的服务器
upstream fdfs_group1 {
server 10.30.132.181:8080 weight=1 max_fails=2 fail_timeout=30s;
}
#设置group2的服务器
upstream fdfs_group2 {
server 10.30.50.244:8080 weight=1 max_fails=2 fail_timeout=30s;
}
server {
#设置服务器端口
listen 8080;
#设置group1的负载均衡参数
location /group1/M00 {
proxy_next_upstream http_502 http_504 error timeout invalid_header;
proxy_cache http-cache;
proxy_cache_valid 200 304 12h;
proxy_cache_key $uri$is_args$args;
proxy_pass http://fdfs_group1;
expires 30d;
}
#设置group2的负载均衡参数
location /group2/M00 {
proxy_next_upstream http_502 http_504 error timeout invalid_header;
proxy_cache http-cache;
proxy_cache_valid 200 304 12h;
proxy_cache_key $uri$is_args$args;
proxy_pass http://fdfs_group2;
expires 30d;
}
#设置清除缓存的访问权限
location ~ /purge(/.*) {
allow 127.0.0.1;
allow 172.16.1.0/24;
deny all;
proxy_cache_purge http-cache $1$is_args$args;
}
启动nginx,并且配置使用fdfs_upload_file测试上传图片
/usr/local/nginx/nginx/sbin/nginx
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
vi /etc/fdfs/client.conf
修改如下参数
base_path=/tracker #日志存放路径
tracker_server=192.168.2.8:22122 #tracker服务器IP地址和端口号
http.tracker_server_port=8080 #tracker服务器的http端口号
使用/usr/bin/fdfs_upload_file上传一个文件，程序会自动返回文件的URL。
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf /root/fdfs/3.jpg
使用浏览器访问 http://ip:8080/返回路径，如下图
四、stroage安装缩略图插件
cd /root/fdfs
yum -y install ImageMagick
yum list installed |grep ImageMagick
tar -zxvf LuaJIT-2.0.4.tar.gz
cd LuaJIT-2.0.4
make
make install
cd ..
rm -rf LuaJIT-2.0.4
tar -zxvf v0.2.19
tar -zxvf v0.10.0
mv ngx_devel_kit-0.2.19 /usr/local/nginx
mv lua-nginx-module-0.10.0 /usr/local/nginx
export LUAJIT_LIB=/usr/local/lib
export LUAJIT_INC=/usr/local/include/luajit-2.0
/usr/local/nginx/nginx/sbin/nginx -V
mv fastdfs-nginx-module /usr/local/nginx/
tar -zxvf nginx-1.9.5.tar.gz
cd nginx-1.9.5
./configure --prefix=/usr/local/nginx/nginx --add-module=/usr/local/nginx/fastdfs-nginx-module/src --add-module=/usr/local/nginx/ngx_devel_kit-0.2.19 --add-module=/usr/local/nginx/lua-nginx-module-0.10.0/
make