单机安装部署FastDFS

来源:互联网 发布:中电数据 李世锋 简历 编辑:程序博客网 时间:2024/05/17 04:19

环境准备:

  • 已经安装好perl
    • 已经安装好 Nginx
  • 软件准备:
    • FastDFS_v5.05.tar.gz
    • fastdfs-nginx-module_v1.16.tar.gz
    • libfastcommon-1.0.7.tar.gz
  • 安装依赖包:yum install -y libevent
  • 安装 libfastcommon-1.0.7.tar.gz
    • 解压:tar zxvf libfastcommon-1.0.7.tar.gz
    • 进入解压后目录:cd libfastcommon-1.0.7/
    • 编译:./make.sh
    • 安装:./make.sh install
    • 设置几个软链接:ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
    • 设置几个软链接:ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
    • 设置几个软链接:ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
    • 设置几个软链接:ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
  • 安装 tracker (跟踪器)服务 FastDFS_v5.08.tar.gz
    • 解压:tar zxvf FastDFS_v5.05.tar.gz
    • 进入解压后目录:cd FastDFS/
    • 编译:./make.sh
    • 安装:./make.sh install
    • 安装结果:
    /usr/bin 存放有编译出来的文件/etc/fdfs 存放有配置文件
  • 配置 tracker 服务
    • 复制一份配置文件:cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
    • 编辑:vim /etc/fdfs/tracker.conf,编辑内容看下面中文注释
    disabled=falsebind_addr=port=22122connect_timeout=30network_timeout=60# 下面这个路径是保存 store data 和 log 的地方,需要我们改下,指向我们一个存在的目录# 创建目录:mkdir -p /opt/fastdfs/tracker/data-and-logbase_path=/opt/fastdfs/tracker/data-and-logmax_connections=256accept_threads=1work_threads=4store_lookup=2store_group=group2store_server=0store_path=0download_server=0reserved_storage_space = 10%log_level=inforun_by_group=run_by_user=allow_hosts=*sync_log_buff_interval = 10check_active_interval = 120thread_stack_size = 64KBstorage_ip_changed_auto_adjust = truestorage_sync_file_max_delay = 86400storage_sync_file_max_time = 300use_trunk_file = false slot_min_size = 256slot_max_size = 16MBtrunk_file_size = 64MBtrunk_create_file_advance = falsetrunk_create_file_time_base = 02:00trunk_create_file_interval = 86400trunk_create_file_space_threshold = 20Gtrunk_init_check_occupying = falsetrunk_init_reload_from_binlog = falsetrunk_compress_binlog_min_interval = 0use_storage_id = falsestorage_ids_filename = storage_ids.confid_type_in_filename = ipstore_slave_file_use_link = falserotate_error_log = falseerror_log_rotate_time=00:00rotate_error_log_size = 0log_file_keep_days = 0use_connection_pool = falseconnection_pool_max_idle_time = 3600http.server_port=8080http.check_alive_interval=30http.check_alive_type=tcphttp.check_alive_uri=/status.html
    • 启动 tracker 服务:/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf
    • 重启 tracker 服务:/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart
    • 查看是否有 tracker 进程:ps aux | grep tracker
  • storage (存储节点)服务部署
    • 一般 storage 服务我们会单独装一台机子,但是这里为了方便我们安装在同一台。
    • 如果 storage 单独安装的话,那上面安装的步骤都要在走一遍,只是到了编辑配置文件的时候,编辑的是 storage.conf 而已
    • 复制一份配置文件:cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
    • 编辑:vim /etc/fdfs/storage.conf,编辑内容看下面中文注释
    disabled=falsegroup_name=group1bind_addr=client_bind=trueport=23000connect_timeout=30network_timeout=60heart_beat_interval=30stat_report_interval=60# 下面这个路径是保存 store data 和 log 的地方,需要我们改下,指向我们一个存在的目录# 创建目录:mkdir -p /opt/fastdfs/storage/data-and-logbase_path=/opt/fastdfs/storage/data-and-logmax_connections=256buff_size = 256KBaccept_threads=1work_threads=4disk_rw_separated = truedisk_reader_threads = 1disk_writer_threads = 1sync_wait_msec=50sync_interval=0sync_start_time=00:00sync_end_time=23:59write_mark_file_freq=500store_path_count=1# 图片实际存放路径,如果有多个,这里可以有多行:# store_path0=/opt/fastdfs/storage/images-data0# store_path1=/opt/fastdfs/storage/images-data1# store_path2=/opt/fastdfs/storage/images-data2# 创建目录:mkdir -p /opt/fastdfs/storage/images-datastore_path0=/opt/fastdfs/storage/images-datasubdir_count_per_path=256# 指定 tracker 服务器的 IP 和端口tracker_server=192.168.1.114:22122log_level=inforun_by_group=run_by_user=allow_hosts=*file_distribute_path_mode=0file_distribute_rotate_count=100fsync_after_written_bytes=0sync_log_buff_interval=10sync_binlog_buff_interval=10sync_stat_file_interval=300thread_stack_size=512KBupload_priority=10if_alias_prefix=check_file_duplicate=0file_signature_method=hashkey_namespace=FastDFSkeep_alive=0use_access_log = falserotate_access_log = falseaccess_log_rotate_time=00:00rotate_error_log = falseerror_log_rotate_time=00:00rotate_access_log_size = 0rotate_error_log_size = 0log_file_keep_days = 0file_sync_skip_invalid_record=falseuse_connection_pool = falseconnection_pool_max_idle_time = 3600http.domain_name=http.server_port=8888
    • 启动 storage 服务:/usr/bin/fdfs_storaged /etc/fdfs/storage.conf,首次启动会很慢,因为它在创建预设存储文件的目录
    • 重启 storage 服务:/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart
    • 查看是否有 storage 进程:ps aux | grep storage
  • 测试是否部署成功
    • 利用自带的 client 进行测试
    • 复制一份配置文件:cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
    • 编辑:vim /etc/fdfs/client.conf,编辑内容看下面中文注释
    connect_timeout=30network_timeout=60# 下面这个路径是保存 store log 的地方,需要我们改下,指向我们一个存在的目录# 创建目录:mkdir -p /opt/fastdfs/client/data-and-logbase_path=/opt/fastdfs/client/data-and-log# 指定 tracker 服务器的 IP 和端口tracker_server=192.168.1.114:22122log_level=infouse_connection_pool = falseconnection_pool_max_idle_time = 3600load_fdfs_parameters_from_tracker=falseuse_storage_id = falsestorage_ids_filename = storage_ids.confhttp.tracker_server_port=80
    • 在终端中通过 shell 上传 opt 目录下的一张图片:/usr/bin/fdfs_test /etc/fdfs/client.conf upload /opt/test.jpg
    • 如下图箭头所示,生成的图片地址为:http://192.168.1.114/group1/M00/00/00/wKgBclb0aqWAbVNrAAAjn7_h9gM813_big.jpg
      • FastDFS
    • 即使我们现在知道图片的访问地址我们也访问不了,因为我们还没装 FastDFS 的 Nginx 模块
  • 安装 fastdfs-nginx-module_v1.16.tar.gz,安装 Nginx 第三方模块相当于这个 Nginx 都是要重新安装一遍的
    • 解压 Nginx 模块:tar zxvf fastdfs-nginx-module_v1.16.tar.gz,得到目录地址:/opt/setups/FastDFS/fastdfs-nginx-module
    • 编辑 Nginx 模块的配置文件:vim /opt/setups/FastDFS/fastdfs-nginx-module/src/config
    • 找到下面一行包含有 local 字眼去掉,因为这三个路径根本不是在 local 目录下的。
    CORE_INCS="$CORE_INCS /usr/local/include/fastdfs /usr/local/include/fastcommon/"
    • 改为如下:
    CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
    • 复制文件:cp /opt/setups/FastDFS/FastDFS/conf/http.conf /etc/fdfs
    • 复制文件:cp /opt/setups/FastDFS/FastDFS/conf/mime.types /etc/fdfs
  • 安装 Nginx 和 Nginx 第三方模块

    • 安装 Nginx 依赖包:yum install -y gcc gcc-c++ pcre pcre-devel zlib zlib-devel openssl openssl-devel
    • 预设几个文件夹,方便等下安装的时候有些文件可以进行存放:
      • mkdir -p /usr/local/nginx /var/log/nginx /var/temp/nginx /var/lock/nginx
    • 解压 Nginx:tar zxvf /opt/setups/nginx-1.8.1.tar.gz
    • 进入解压后目录:cd /opt/setups/nginx-1.8.1/
    • 编译配置:(注意最后一行)
    ./configure \--prefix=/usr/local/nginx \--pid-path=/var/local/nginx/nginx.pid \--lock-path=/var/lock/nginx/nginx.lock \--error-log-path=/var/log/nginx/error.log \--http-log-path=/var/log/nginx/access.log \--with-http_gzip_static_module \--http-client-body-temp-path=/var/temp/nginx/client \--http-proxy-temp-path=/var/temp/nginx/proxy \--http-fastcgi-temp-path=/var/temp/nginx/fastcgi \--http-uwsgi-temp-path=/var/temp/nginx/uwsgi \--http-scgi-temp-path=/var/temp/nginx/scgi \--add-module=/opt/setups/FastDFS/fastdfs-nginx-module/src
    • 编译:make
    • 安装:make install
    • 复制 Nginx 模块的配置文件:cp /opt/setups/FastDFS/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs
    • 编辑 Nginx 模块的配置文件:vim /etc/fdfs/mod_fastdfs.conf,编辑内容看下面中文注释
    • 如果在已经启动 Nginx 的情况下修改下面内容记得要重启 Nginx。
    connect_timeout=2network_timeout=30# 下面这个路径是保存 log 的地方,需要我们改下,指向我们一个存在的目录# 创建目录:mkdir -p /opt/fastdfs/fastdfs-nginx-module/data-and-logbase_path=/opt/fastdfs/fastdfs-nginx-module/data-and-logload_fdfs_parameters_from_tracker=truestorage_sync_file_max_delay = 86400use_storage_id = falsestorage_ids_filename = storage_ids.conf# 指定 tracker 服务器的 IP 和端口tracker_server=192.168.1.114:22122storage_server_port=23000group_name=group1# 因为我们访问图片的地址是:http://192.168.1.114/group1/M00/00/00/wKgBclb0aqWAbVNrAAAjn7_h9gM813_big.jpg# 该地址前面是带有 /group1/M00,所以我们这里要使用 true,不然访问不到(原值是 false)url_have_group_name = truestore_path_count=1# 图片实际存放路径,如果有多个,这里可以有多行:# store_path0=/opt/fastdfs/storage/images-data0# store_path1=/opt/fastdfs/storage/images-data1# store_path2=/opt/fastdfs/storage/images-data2store_path0=/opt/fastdfs/storage/images-datalog_level=infolog_filename=response_mode=proxyif_alias_prefix=flv_support = trueflv_extension = flvgroup_count = 0
    • 编辑 Nginx 配置文件
    # 注意这一行行,我特别加上了使用 root 用户去执行,不然有些日记目录没有权限访问user  root;worker_processes  1;events {    worker_connections  1024;}http {    include       mime.types;    default_type  application/octet-stream;    sendfile        on;    keepalive_timeout  65;    server {        listen       8080;        # 访问本机        server_name  192.168.1.114;        # 拦截包含 /group1/M00 请求,使用 fastdfs 这个 Nginx 模块进行转发        location ~/group[0-9]/M00  {            ngx_fastdfs_module;        }
  •  location = /favicon.ico {                log_not_found off;                access_log off;                }      }}
         如果需要再单台服务器实例多个storage的解决办法

一、复制一份storage.conf并修改文件名storage_aaa.conf

        二、修改storage_aaa.conf相关配置

     1、修改组名:group_name=group4

2、修改端口:port=23004

3、修改日志文件目录:base_path=/fastdfs/aaa/data-and-log

        4、修改资源保存路径:store_path0=/fastdfs/aaa/aaa-data

三、修改mod_fastdfs.conf配置文件

1、修改组名:group_name=group1/group2/group3/group4  多个用/区分开

2、设置组个数:group_count = 4

3、设置每一组信息:

[group1]
group_name=group1
storage_server_port=23000
store_path_count=1
store_path0=/fastdfs/storage/images-data

[group2]
group_name=group2
storage_server_port=23001
store_path_count=1
store_path0=/fastdfs/storage_voice/voice-data
原创粉丝点击