在阿里云上跑 Ubuntu Server 做 Web 服务,其实核心就两件事:把内核参数调到适合高并发的状态,以及利用阿里云特有的网络硬件提速能力。
很多新手直接拿默认镜像就跑 Nginx/Tomcat/Go 服务,遇到高并发 QPS 稍微上来一点,CPU 飙高、连接数打满,这时候再调优往往已经晚了。下面这份清单是我在实际生产环境(尤其是电商、直播类业务)里总结出来的“必选项”,按优先级排列。
1. 网络栈优化(最关键的一环)
Web 服务的瓶颈通常在 TCP 连接建立和断开,而不是计算本身。Ubuntu 默认的内核参数是为通用场景设计的,不是为高并发 Web 设计的。
你需要修改 /etc/sysctl.conf,加入以下参数:
# 开启 TCP Fast Open (TFO),减少握手延迟,对移动端访问特别有效
net.ipv4.tcp_fastopen = 3
# 增加本地端口范围,避免 TIME_WAIT 耗尽端口导致无法新建连接
net.ipv4.ip_local_port_range = 1024 65535
# 允许重用处于 TIME_WAIT 状态的 socket,加快回收
net.ipv4.tcp_tw_reuse = 1
# 缩短 TIME_WAIT 时间,快速释放资源
net.ipv4.tcp_fin_timeout = 15
# 增大 SYN Cookie 保护,防止 SYN Flood 攻击
net.ipv4.tcp_syncookies = 1
# 调整 backlog 队列长度,配合 Nginx listen backlog 使用
net.core.somaxconn = 65535
net.ipv4.tcp_max_syn_backlog = 65535
# 启用 BBR 拥塞控制算法(阿里云 ECS 推荐,比 Cubic 更适合高带宽低延迟场景)
net.core.default_qdisc = fq
net.ipv4.congestion_control = bbr
注意: 修改后执行 sysctl -p 生效。对于 BBR,确保你的内核版本是 4.9 以上(现在的 Ubuntu 20.04/22.04 LTS 默认都支持)。
2. 文件描述符限制
Linux 默认单进程最大打开文件数是 1024,这对于一个 Web 服务器来说简直是灾难。Nginx 每个连接就是一个文件描述符。
- 系统级限制:修改
/etc/security/limits.conf* soft nofile 65535 * hard nofile 65535 root soft nofile 65535 root hard nofile 65535 - 服务级限制:如果你用 systemd 管理 Nginx 或 PHP-FPM,需要在 service 文件中添加:
[Service] LimitNOFILE=65535
重启服务后,用 ulimit -n 检查是否生效。
3. 阿里云专属优化:ENI 与多队列网卡
这是很多人忽略的“阿里云红利”。阿里云 ECS 使用的是弹性网卡(ENI),并且支持 RSS(接收端缩放)技术。
- 绑定多队列:如果你的 CPU 核数较多(比如 8C 以上),确保网卡驱动开启了多队列中断处理。这能避免所有网络包都挤在一个 CPU 核心上处理,造成上下文切换开销过大。
- 检查方式:使用
ethtool -l eth0查看当前队列数,通常应该等于 CPU 核心数。如果不匹配,可能需要更新网卡驱动或在 BIOS/GRUB 中调整参数。 - 关闭不必要的 Offload:有时候为了稳定性,可以手动关闭某些 offload 功能,但在高性能场景下,保持开启通常是更好的选择。
4. Swap 交换分区策略
强烈建议:禁用 Swap 或者将 swappiness 调至极低。
Web 服务最怕的是内存不足时发生 Swap 抖动,这会导致响应时间从毫秒级瞬间变成秒级甚至超时。
- 临时方案:
vm.swappiness = 1(写入 sysctl.conf) - 最佳实践:如果预算允许,尽量通过扩容内存来应对负载,而不是依赖磁盘交换。对于关键业务,直接在创建实例时不分配 Swap 分区,或者在 fstab 中注释掉 swap 行。
5. 文件系统与 I/O 调度
- XFS vs EXT4:阿里云新实例默认多为 XFS 文件系统。对于大文件存储(如视频、日志),XFS 表现更好;但对于大量小文件(如 WordPress 插件、Node.js 模块),EXT4 有时更稳定。根据业务类型选择。
- I/O Scheduler:如果是 SSD 云盘(ESSD),建议使用
none或mq-deadline调度器,因为 SSD 没有机械磁头寻道问题,复杂的调度算法反而增加 CPU 开销。echo none > /sys/block/vda/queue/scheduler
6. 安全组与防火墙:少即是多
不要过度依赖主机内部的 iptables 或 ufw 来做流量过滤。阿里云的安全组(Security Group)是基于虚拟化的底层实现,性能远高于主机内软件防火墙。
- 做法:只在阿里云控制台配置安全组规则,允许特定 IP 段访问 80/443 端口。
- 主机层面:关闭 ufw (
sudo ufw disable),让 iptables 仅保留必要的 NAT 和 conntrack 规则,避免重复过滤带来的性能损耗。
7. 监控与告警:别等挂了才知道
- 安装阿里云云监控插件:这是免费的,而且能获取到最准确的 ECS 指标(CPU、内存、网络 IO、磁盘 IO)。
- 重点监控指标:
tcp_active_connections:活跃连接数。tcp_wait_connections:等待处理的连接数。network_in/out_rate:网络吞吐量,判断是否达到带宽上限。disk_utilization:磁盘利用率,超过 80% 就要警惕了。
8. 常见误区提醒
- 不要盲目调大
worker_processes:在 Nginx 中,worker_processes auto;通常就是最优解,让它自动匹配 CPU 核心数即可。 - PHP-FPM pm.max_children 要算清楚:这个值 = 总可用内存 / (单个 PHP 进程平均内存占用)。设太大会导致 OOM(内存溢出),设太小则并发能力不足。建议在压测后确定。
- DNS 解析:如果使用阿里云 DNS,确保客户端和服务端都配置了阿里云内网 DNS 地址,这样域名解析走内网,速度极快且免费。
总结
在阿里云上优化 Ubuntu Web 服务,80% 的工作在于网络栈参数调整和 Swap 禁用,20% 在于应用层配置。先做好基础内核优化,再通过阿里云云监控观察瓶颈所在,针对性地调整 Nginx/PHP/Go 的配置,这才是正道。
最后,记得定期备份快照。优化前打个快照,万一改崩了,一键恢复,这才是生产环境的底气。
云技术博客