优化 Web 服务器(如 Nginx 和 Apache)的并发连接处理能力是一个系统工程,需要从操作系统、服务器配置、应用程序和架构等多个层面进行。恒讯科技为您提供一份全面且深入的优化指南。Web服务器并发优化全攻略:从系统配置到架构设计
在调整Web服务器之前,必须确保操作系统本身能够支持大量的并发连接。
调整文件描述符限制
为何重要:每个网络连接都会消耗一个文件描述符。系统默认值(如1024)对于高并发场景来说太低了。
如何操作:
临时调整:ulimit -n 65535
永久生效:编辑 /etc/security/limits.conf 文件,添加:
text
* soft nofile 65535
* hard nofile 65535
系统级全局限制:检查 /proc/sys/fs/file-max,如果需要,在 /etc/sysctl.conf 中设置 fs.file-max = 100000。
优化TCP/IP网络堆栈
编辑 /etc/sysctl.conf,应用以下配置后执行 sysctl -p 生效。
bash
# 增大等待连接队列长度,应对突发流量
net.core.somaxconn = 65535
# 加快TIME-WAIT状态的端口回收,便于应对短连接高并发
net.ipv4.tcp_tw_reuse = 1
# 调整系统最大跟踪的连接数
net.netfilter.nf_conntrack_max = 655360
# 增加TCP缓冲区大小,提升吞吐量
net.ipv4.tcp_rmem = 4096 87380 6291456
net.ipv4.tcp_wmem = 4096 16384 4194304
# 启用TCP Fast Open (TFO) 以减少连接建立的延迟
net.ipv4.tcp_fastopen = 3
Nginx 以其事件驱动的异步架构闻名,非常适合高并发。
工作进程与连接数
nginx
# 设置为与CPU核心数相同或自动
worker_processes auto;
events {
# 每个worker进程能处理的最大连接数
worker_connections 10240;
# 允许工作进程同时接受所有新连接
multi_accept on;
# 使用高效的事件模型(Linux下为epoll)
use epoll;
}
高效缓冲区与超时设置
nginx
http {
# 禁用响应头中的版本号,提升安全性
server_tokens off;
# 允许服务器直接发送文件,提升静态文件性能
sendfile on;
# 在sendfile开启时,合并数据包再发送,提升网络效率
tcp_nopush on;
# 禁用Nagle算法,提升实时响应
tcp_nodelay on;
# 保持连接超时时间,减少TCP握手开销
keepalive_timeout 30;
# 单个保持连接上最多服务的请求数
keepalive_requests 1000;
# 客户端请求超时时间
client_header_timeout 15;
client_body_timeout 15;
# 发送响应给客户端的超时时间
send_timeout 15;
# 限制客户端请求体大小,防止滥用
client_max_body_size 64m;
}
限制与防护
nginx
http {
# 限制单个IP的并发连接数
limit_conn_zone $binary_remote_addr zone=addr:10m;
limit_conn addr 100;
# 限制请求速率(防CC攻击)
limit_req_zone $binary_remote_addr zone=one:10m rate=10r/s;
limit_req zone=one burst=20 nodelay;
}
Apache 的优化关键在于选择正确的工作模式(MPM)。
选择并优化MPM
Event MPM(推荐):对于高并发、非阻塞I/O场景最佳。
Worker MPM:线程化模型,内存占用少于Prefork。
Prefork MPM:进程模型,兼容性最好,但内存消耗大,并发能力弱。
Event MPM 配置示例(在 /etc/httpd/conf.modules.d/00-mpm.conf 中启用并配置):
apache
<IfModule mpm_event_module>
StartServers 3
MinSpareThreads 75
MaxSpareThreads 250
ThreadsPerChild 25
MaxRequestWorkers 400 # (MaxRequestWorkers = ThreadsPerChild * ServerLimit)
MaxConnectionsPerChild 0 # 设为0表示进程不重启,但可能内存泄漏;可设为10000
</IfModule>
通用模块优化
apache
# 启用保持连接,减少TCP握手
KeepAlive On
KeepAliveTimeout 5
MaxKeepAliveRequests 100
# 禁用不需要的模块,减少内存占用和潜在攻击面
# 例如:LoadModule version_module modules/mod_version.so
# 使用mod_deflate压缩输出,减少带宽占用
<IfModule mod_deflate.c>
AddOutputFilterByType DEFLATE text/html text/plain text/xml text/css application/javascript
</IfModule>
# 设置长缓存时间给静态资源
<FilesMatch "\.(ico|pdf|flv|jpg|jpeg|png|gif|js|css|swf)$">
Header set Expires "access plus 1 year"
</FilesMatch>
Web服务器只是链条的一环,应用本身效率至关重要。
启用OPcache(PHP)
在 php.ini 中配置,极大提升PHP脚本执行速度。
ini
opcache.enable=1
opcache.memory_consumption=128
opcache.max_accelerated_files=10000
opcache.revalidate_freq=60
使用外部缓存
将频繁查询的结果缓存到 Redis 或 Memcached 中。
对完整的页面或页面片段使用 Varnish 等HTTP加速器。
优化数据库
确保查询语句使用了索引。
考虑使用数据库连接池(如 PgBouncer for PostgreSQL)。
当单机优化到达瓶颈时,架构升级是唯一出路。
动静分离
使用Nginx直接处理静态文件(图片、CSS、JS),其效率远高于Apache和任何后端语言。
nginx
server {
location ~* \.(jpg|jpeg|png|gif|ico|css|js)$ {
expires 1y;
add_header Cache-Control "public, immutable";
}
}
负载均衡
使用Nginx或专门的负载均衡器(如HAProxy)将流量分发到多台后端应用服务器,实现水平扩展。
引入CDN
将全球分布的静态资源交给CDN,让用户从最近的节点获取内容,极大减轻源站服务器压力。
使用工具监控
htop, iotop:查看系统资源。
nginx -t 和 apachectl configtest:测试配置是否正确。
Nginx Status / Apache Status Module:查看服务器实时状态。
Prometheus + Grafana:建立可视化监控仪表盘。
压力测试
使用 ab (Apache Bench), wrk, 或 siege 等工具模拟高并发场景,验证优化效果。
bash
ab -n 10000 -c 1000 http://your-website.com/
基础:从操作系统参数和Web服务器的基础配置(工作进程、连接数)开始。
核心:调整缓冲区、超时和保持连接参数,并启用压缩、缓存等性能特性。
防护:配置连接和请求限制,防止恶意流量拖垮服务器。
纵深:优化应用程序和数据库,减少后端处理时间。
扩展:通过动静分离、负载均衡和CDN等架构手段,突破单机性能瓶颈。
Copyright © 2013-2020. All Rights Reserved. 恒讯科技 深圳市恒讯科技有限公司 粤ICP备20052954号 IDC证:B1-20230800.移动站


