FastDFS 分布式的文件存储环境搭建
来源:互联网 发布:电脑清除所有数据 编辑:程序博客网 时间:2024/05/20 18:52
FastDFS 分布式的文件存储环境搭建
FastDFS环境安装包地址:http://download.csdn.net/detail/rzg813/9273935 (包含6个)
在Linux CentOS 6.5 环境下搭建FastDFS集群环境步骤:
注意,因为搭建此环境可能会多次反复操作,所以最好把基本软件存储到挂载硬盘中。
1. 相关软件包
FastDFS:http://sourceforge.net/projects/fastdfs/files/ 此处我们使用FastDFS_v5.02.tar.gz版本
libfastcommon:https://github.com/happyfish100/libfastcommon 可以使用git clone 到服务器
nginx:此处使用nginx-1.8.0.tar.gz
fastdfs-nginx-module:此处fastdfs-nginx-module_v1.16.tar.gz
nginx的依赖包:pcre-8.36.tar.gz、zlib-1.2.8.tar.gz
- 挂载硬盘命令
##挂载硬盘mount /dev/xvdb /wcnm
- 拷贝文件
##拷贝文件//此目录为挂载硬盘的软件存储目录cd /wcnm/soft_backup//git clone 到本地的文件cp -rf libfastcommon /usr/src/tar zxvf FastDFS_v5.02.tar.gz -C /usr/src/tar zxvf nginx-1.8.0.tar.gz -C /usr/src/tar zxvf fastdfs-nginx-module_v1.16.tar.gz -C /usr/src/tar zxvf pcre-8.36.tar.gz -C /usr/src/tar zxvf zlib-1.2.8.tar.gz -C /usr/src/其他命令是解压并拷贝文件到/usr/src/ 目录
- 安装libfastcommon
cd /usr/src/libfastcommonsh make.sh sh make.sh install##设置软链接ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.soln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.soln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.soln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
- 安装FastDFS_5.02
cd /usr/src/FastDFSsh make.sh sh make.sh install##检查是否安装成功cd /etc/fdfs##创建文件存储目录:mkdir /wcnm/storage##创建tracker的数据文件和日志目录mkdir /home/fdfs/tracker##创建storage的数据文件和日志目录mkdir /home/fdfs/storage
- 配置目录下的tracker.conf,设置相关的信息并保存。
vim /etc/fdfs/tracker.conf#修改如下内容:#启用配置文件,设置为false表示启用disabled=false#设置tracker的端口号port=22122#设置tracker的数据文件和日志目录(目录需要预先创建)base_path=/home/fdfs/tracker#设置http端口号http.server_port=8080启动tracker,确认启动是否成功,查看端口22122是否开始监听/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf restartnetstat -apn | grep fdfs查看启动日志:cat /home/fdfs/tracker/logs/*.log
- 安装Storage
###编辑配置文件目录下的storage.conf,设置相关的信息并保存#启用配置文件disabled=false#组名,根据实际情况修改group_name=group1#设置storage的端口号port=23000#设置storage的数据文件和日志目录(目录需要预先创建)base_path=/fdfs/storage#存储路径个数,需要和store_path个数匹配store_path_count=1#存储路径store_path0=/fdfs/storage#tracker服务器的IP地址和端口号#集群配置则把tracker服务器的IP地址和端口号逐一列出tracker_server=10.116.25.240:22122tracker_server=192.168.7.202:22122#设置http端口号http.server_port=8080##启动storage,确认启动是否成功,查看端口23000是否开始监听/usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf restartnetstat -apn | grep fdfs查看启动日志:cat /home/fdfs/storage/logs/*.log确认启动storage后,可以运行fdfs_monitor查看storage服务器是否已登记到tracker服务器/usr/local/bin/fdfs_monitor /etc/fdfs/storage.confnetstat -apn | grep fdfs
- 安装Storage上对应的Nginx
下载依赖:
http://sourceforge.net/projects/pcre/files/pcre/8.36/pcre-8.36.tar.gz/download
http://www.zlib.net/
创建nginx的安装目录
将代码包和插件(nginx-1.7.7、fastdfs-nginx-module_v1.16、zlib-1.2.8、pcre-8.36)复制/usr/local/src内,然后使用tar命令解压
mkdir /usr/local/nginx_storage
切换到nginx解压目录,运行./configure进行安装前的设置
./configure --prefix=/usr/local/nginx --add-module=/usr/src/fastdfs-nginx-module/src --with-pcre=/usr/src/pcre-8.36/ --with-zlib=/usr/src/zlib-1.2.8
运行make进行编译,确保编译成功
make
运行make install进行安装
make install
将FastDFS的nginx插件模块的配置文件copy到FastDFS配置文件目录
cp /usr/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
9. 编辑/usr/local/nginx/conf配置文件目录下的nginx.conf,添加storage存储目录信息、
将server段中的listen端口号修改为8080listen 8080;在server段中添加: //配置一个时,/group1/M00 //多个时如下:location /group[1-3]/M00 { root /fdfs/storage/data; ngx_fastdfs_module;}
编辑/etc/fdfs配置文件目录下的mod_fastdfs.conf,设置storage信息并保存。
一般只需要改动以下几个参数
base_path=/wcnm/storage #保存日志目录tracker_server=10.116.25.240:22122 #tracker服务器的IP地址以及端口号 //多台服务器配置多个##tracker_server=192.168.7.202:22122 #tracker服务器的IP地址以及端口号storage_server_port=23000 #storage服务器的端口号group_name=group1 #当前服务器的group名url_have_group_name = true #文件url中是否有group名store_path_count=1 #存储路径个数,需要和store_path个数匹配store_path0=/wcnm/storage #存储路径http.need_find_content_type=true #从文件扩展名查找文件类型(nginx时为true)group_count = 1 #设置组的个数
在末尾增加分组的具体信息:
[group1]group_name=group1storage_server_port=23000store_path_count=1store_path0=/wcnm/storage
建立M00至存储目录的符号连接
ln -s /wcnm/storage/data /wcnm/storage/data/M00
启动nginx,确认是否成功
/usr/local/nginx/sbin/nginx
- 测试
此处测试是使用fastdfs自带的客户端进行测试
配置/etc/fdfs/client.conf文件,修改以下参数
#日志存放路径base_path=/home/fdfs/tracker#tracker服务器IP地址和端口号 ##此ip可以是公网ip 也可以局域网iptracker_server=10.116.25.240:22122#tracker服务器的http端口号http.tracker_server_port=8080测试命令(图片abc.jpg在服务器):/usr/local/bin/fdfs_upload_file /etc/fdfs/client.conf /home/abc.jpg
- 按上面配置完成后不能上传图,需要开启相应的端口:
iptables -A INPUT -p tcp --dport 22122 -j ACCEPT/etc/rc.d/init.d/iptables save/etc/rc.d/init.d/iptables restart
- 重新启动配置的服务
重启tracker/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart重启storage/usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf restart/usr/local/nginx/sbin/nginxnginx重启:cd /usr/local/nginx/sbin/./nginx -s reload
浏览器访问
常用命令:
netstat -pan|grep 22122netstat -an | grep 22122netstat -anp 显示系统端口使用情况nc -lp 22122 &
注:
按上面配置完成后,即可使用代码上传文件!
此时重启服务器后,部分服务则因为没有启动而上传文件失败!
因此需要添加开机启动!
- FastDFS 分布式的文件存储环境搭建
- FastDFS 分布式的文件存储环境搭建
- FastDFS+Nginx+fastdfs-nginx-module分布式存储环境搭建
- FASTDFS 分布式文件存储
- 分布式存储 CentOS虚拟机环境搭建FastDFS集群
- 搭建FastDFS分布式存储环境(使用Nginx模块)
- 搭建FastDFS分布式存储环境(使用Nginx模块)
- 搭建FastDFS分布式存储环境(使用Nginx模块)
- 分布式文件存储 搭建FastDFS-5.0.5集群
- 分布式文件存储 搭建FastDFS-5.0.5集群
- 分布式文件存储 搭建FastDFS-5.0.5集群
- FastDFS文件分布式文件服务器搭建
- centos6.5 搭建fastdfs分布式存储图片
- 分布式存储 CentOS6.5虚拟机环境搭建FastDFS-5.0.5集群
- 分布式存储 CentOS6.5虚拟机环境搭建FastDFS-5.0.5集群
- 分布式存储 CentOS6.5虚拟机环境搭建FastDFS-5.0.5集群
- 1Nginx+fastdfs分布式文件存储
- 分布式文件存储FastDFS配置文件详解
- 有趣的Autolayout示例2-Masonry实现(转)
- Android开源框架ImageLoader
- 日志实时分析统计平台三 ----- storm安装配置
- 微软企业库dll引用
- CodeBlocks配置TDM-GCC编译环境
- FastDFS 分布式的文件存储环境搭建
- 命令行修改Android系统时间
- 半数集问题
- 最小公倍数
- Android开源项目
- 用window.open打开的新窗口如何居中弹出
- 500px的数据分析之路——中小创业公司零基础数据分析面临的挑战
- 极光推送JPush
- 数据库分库分表(sharding)