高并发站点Nginx优化及详细介绍

来源:互联网 发布:cms个人网站系统 编辑:程序博客网 时间:2024/05/22 07:06

一 项目中基本优化:

1.TCP sockets 与Unix sockets

 Unix sockets比TCP sockets提供更好一些的性能(因为I/O数据读写少,上下文切换少)。

upstream backend {   server unix:/var/run/fastcgi.sock;   # server 127.0.0.1:8080; }

2.禁用或者优化access_log

 大流量访问时,较大的访问会导致访问日志对磁盘的读写非常大。如果不需要日志的话,可以禁用掉。

access_log off; log_not_found off; 

或者打开缓冲

access_log /var/log/nginx/access.log main buffer=32k;

3.打开Gzip

复制代码

gzip on;
gzip_min_length 1k;
gzip_buffers 4 16k;
gzip_http_version 1.0;
gzip_comp_level 2;
gzip_types text/plain text/css application/json application/x-javascript text/xml application/xml application/xml+rss text/javascript;
gzip_vary on;
gzip_proxied expired no-cache no-store private auth;
gzip_disable "MSIE [1-6]\.";

复制代码

4.优化输出缓存

复制代码
fastcgi_buffers 256 16k; fastcgi_buffer_size 128k; fastcgi_connect_timeout 3s; fastcgi_send_timeout 120s; fastcgi_read_timeout 120s; fastcgi_busy_buffers_size 256k; fastcgi_temp_file_write_size 256k; 
复制代码

5.优化worker processes

 nginx是多进程的而不是多线程的,对于进程相关的配置我们需要如下优化。

 首先看一下服务器的处理器数。

cat /proc/cpuinfo | grep processor

 然后设置worker_processes,进程数为得到的处理器数。 worker_connections 是每一个进程可以打开的最大连接数,可以调大一些。下面给一个参考。

复制代码
# We have 16 cores worker_processes 16; # connections per worker events {   worker_connections 4096;   multi_accept on; }
复制代码

 记住multi_accept 必须打开。


二 配置(优化)详解:


user www; pid /usr/local/nginx/nginx.pid; worker_processes auto; worker_rlimit_nofile 100000; 

user使用的用户和组;

pid指定pid的存放路径;

user和pid采用默认设置即可。

worker_processes 工作进程数,一般定义为cpu的总核数,如2个4核cpu总核数为8,如果不清楚可以设置为 auto,这样会自动判定cpu核数

worker_rlimit_nofile  每个进程最大打开文件数,如果不设置,为 "ulimit -n" ,设置后可以处理比“ulimit -n”更多的文件,一般来说设置为worker_connections的3-4倍就够用了,也可以把这个值设高 100000.




events { worker_connections 2048; multi_accept on; use epoll; }

events模块中包含处理连接的设置

worker_connections 设置可由一个worker进程同时打开的最大连接数。不能超过worker_rlimit_nofile。最大客户数也由系统的可用socket连接数限制(~64K),所以设置不切实际的高没什么用。

multi_accept 默认是on。设置为on后,多个worker按串行方式来处理连接,也就是一个连接只有一个worker被唤醒,其他的处于休眠状态。设置为off后,多个worker按并行方式来处理连接,也就是一个连接会唤醒所有的worker,知道连接分配完毕,没有取得连接的继续休眠。当你的服务器连接数不多时,开启这个参数会让负载有一定程度的降低。但是当服务器的吞吐量很大时,为了效率,请关闭这个参数。

use 设置用于复用客户端线程的轮询方法。如果你使用Linux 2.6+,你应该使用epoll。如果你使用*BSD,你应该使用kqueue。

(值得注意的是如果你不知道Nginx该使用哪种轮询方法的话,它会选择一个最适合你操作系统的)




http { server_tokens off; sendfile on; tcp_nopush on; tcp_nodelay on; ... } 

HTTP模块控制着nginx http处理的所有核心特性。因为这里只有很少的配置,所以我们只节选配置的一小部分。所有这些设置都应该在http模块中,甚至你不会特别的注意到这段设置。

server_tokens  并不会让nginx执行的速度更快,但它可以关闭在错误页面中的nginx版本数字,这样对于安全性是有好处的。

sendfile 指定是否使用OS的sendfile函数来传输文件普通应用应该设为on,下载等IO重负荷的应用应该设为off。默认值是off

tcp_nopush 告诉nginx在一个数据包里发送所有头文件,而不一个接一个的发送。

tcp_nodelay 小的数据包不等待直接传输。默认为on
看上去是和tcp_nopush相反的功能,但是两边都为on时nginx也可以平衡这两个功能的使用。




access_log off; error_log /var/log/nginx/error.log crit; 

access_log 设置nginx是否将存储访问日志。关闭这个选项可以让读取磁盘IO操作更快;

error_log 告诉nginx只能记录严重的错误;




keepalive_timeout 10; client_header_timeout 10; client_body_timeout 10; reset_timedout_connection on; send_timeout 10; 

keepalive_timeout  HTTP连接的持续时间。设的太长会使无用的线程变的太多。
设成0关闭此功能。默认为75
给客户端分配keep-alive链接超时时间。服务器将在这个超时时间过后关闭链接。我们将它设置低些可以让ngnix持续工作的时间更长。

client_header_timeout 和client_body_timeout 读取客户端的请求head部分和客户端的请求body部分的超时时间。可以设低一些;

reset_timeout_connection 关闭不响应的客户端连接,释放那个客户端所占有的内存空间。

send_timeout 指定客户端的响应超时时间,这个设置不会用于整个转发器,而是在两次客户端读取操作之间,如果在这段时间内,客户端没有读取任何数据,nginx就会关闭连接。




limit_conn_zone $binary_remote_addr zone=addr:5m; limit_conn addr 100; 

限制某条件下的同时连接数。

limit_conn_zone 设置用于保存各种key(比如当前连接数)的共享内存的参数。5m就是5兆字节,这个值应该被设置的足够大以存储(32K*5)32byte状态或者(16K*5)64byte状态。

limit_conn 为给定的key设置最大连接数。这里key是addr,我们设置的值是100,也就是说我们允许每一个IP地址最多同时打开有100个连接




include /etc/nginx/mime.types; default_type text/html; charset UTF-8; 

include 包含文件mine设置

default_type 设置默认的MIME-type。

charset 设置使用的字符集,如果一个网站有多种字符集,请不要随便设置,应让程序员在HTML代码通过Meta标签设置;




gzip on; gzip_disable "msie6"; # gzip_static on; gzip_proxied any; gzip_min_length 1000; gzip_comp_level 4; gzip_types text/plain text/css application/json application/x-javascript text/xml application/xml application/xml+rss text/javascript; 

gzip 让nginx采用gzip压缩的形式发送数据,减少我们发送的数据量。

gzip_disable 为指定的客户端禁用gzip功能,设置成IE6或者更低版本以广泛兼容。

gzip_static 让nginx在压缩资源之前,先查找是否有预先gzip处理过的资源。这要求你预先压缩你的文件(在这个例子中被注释掉了),从而允许你使用最高压缩比,这样nginx就不用再压缩这些文件了(想要更详尽的gzip_static的信息,请点击这里)。

gzip_proxied 允许或者禁止压缩基于请求和响应的响应流。我们设置为any,意味着将会压缩所有的请求。

gzip_min_length 设置对数据启用压缩的最少字节数。如果一个请求小于1000字节,我们最好不要压缩它,因为压缩这些小的数据会降低处理此请求的所有进程的速度。

gzip_comp_level 设置数据的压缩等级。这个等级可以是1-9之间的任意数值,9是最慢但是压缩比最大的。我们设置为4,这是一个比较折中的设置。

gzip_type 设置需要压缩的数据格式。上面例子中已经有一些了,你也可以再添加更多的格式




# cache informations about file descriptors, frequently accessed files # can boost performance, but you need to test those values open_file_cache max=100000 inactive=20s; open_file_cache_valid 30s; open_file_cache_min_uses 2; open_file_cache_errors on; ## # Virtual Host Configs # aka our settings for specific servers ## include /etc/nginx/conf.d/*.conf; include /etc/nginx/sites-enabled/*; 

open_file_cache 打开缓存的同时也指定了缓存最大数目,以及缓存的时间。我们可以设置一个相对高的最大时间,这样我们可以在它们不活动超过20秒后清除掉。

open_file_cache_valid 在open_file_cache中指定检测正确信息的间隔时间。

open_file_cache_min_uses 定义了open_file_cache中指令参数不活动时间期间里最小的文件数。

open_file_cache_errors 指定了当搜索一个文件时是否缓存错误信息,也包括再次给配置中添加文件。我们也包括了服务器模块,这些是在不同文件中定义的。如果你的服务器模块不在这些位置,你就得修改这一行来指定正确的位置。




一个完整的配置:

user www-data; pid /var/run/nginx.pid; worker_processes auto; worker_rlimit_nofile 100000; events { worker_connections 2048; multi_accept on; use epoll; } http { server_tokens off; sendfile on; tcp_nopush on; tcp_nodelay on; access_log off; error_log /var/log/nginx/error.log crit; keepalive_timeout 10; client_header_timeout 10; client_body_timeout 10; reset_timedout_connection on; send_timeout 10; limit_conn_zone $binary_remote_addr zone=addr:5m; limit_conn addr 100; include /etc/nginx/mime.types; default_type text/html; charset UTF-8; gzip on; gzip_disable "msie6"; gzip_proxied any; gzip_min_length 1000; gzip_comp_level 6; gzip_types text/plain text/css application/json application/x-javascript text/xml application/xml application/xml+rss text/javascript; open_file_cache max=100000 inactive=20s; open_file_cache_valid 30s; open_file_cache_min_uses 2; open_file_cache_errors on; include /etc/nginx/conf.d/*.conf; include /etc/nginx/sites-enabled/*; }