努力
加油

在只有4G内存的服务器上部署MySQL 8需要做哪些优化?

4G 内存跑 MySQL 8,说实话,压力不小。MySQL 8 相比 5.7,在字符集处理(utf8mb4_0900_ai_ci)、JSON 支持以及 InnoDB 引擎的默认配置上都有变化,内存开销确实会大一些。

如果只有 4G 物理内存,且还要运行操作系统和其他必要服务(如 Web 服务器、监控 Agent 等),留给 MySQL 的空间非常有限。如果不做优化,大概率会出现频繁的 Swap 交换,导致数据库性能断崖式下跌,甚至 OOM(内存溢出)崩溃。

以下是我结合国内云厂商(阿里云、腾讯云等)常见 ECS/CVM 实例规格和实际生产经验总结的优化方案,核心原则是:保守配置,避免激进,确保稳定。

1. 核心参数调优(my.cnf / my.ini)

不要照搬网上的“高配服务器”模板,针对 4G 内存,重点调整以下几个关键参数:

A. innodb_buffer_pool_size(重中之重)

这是 MySQL 性能的命脉。对于单实例部署,通常建议设置为物理内存的 50%-60%。

  • 建议值:2G 到 2.5G。
  • 注意:如果你还跑了 Nginx/Apache、Java/Python 应用或其他服务,必须留出足够内存给它们。比如 Web 应用需要 1G,那 Buffer Pool 最多只能给 1.5G-2G。
  • 计算公式参考:(总内存 - OS预留 - 其他应用预留) * 0.6

B. innodb_log_file_size(日志文件大小)

MySQL 8 默认是 48M,这对于写入密集型应用来说太小了,会导致频繁刷盘。

  • 建议值:1G 或 2G。
  • 原理:更大的 redo log 可以减少 checkpoint 频率,提升写入性能。但要注意,修改这个值需要重启 MySQL,且旧数据文件会被覆盖重建,请在低峰期操作。

C. tmp_table_size 和 max_heap_table_size

这两个值限制了内存中临时表的最大大小。如果查询涉及大量排序或分组,超出此值会落到磁盘,速度极慢。

  • 建议值:64M – 128M。
  • 警告:不要设得太大,因为每个连接都会尝试分配这么多内存。如果有 100 个并发连接同时创建大临时表,瞬间就会撑爆内存。

D. query_cache_type 和 query_cache_size

直接关闭!
MySQL 8 已经彻底移除了 Query Cache。如果你的配置文件里还有这两项,请注释掉或删除。Query Cache 在高并发下会造成严重的互斥锁竞争,是性能杀手。

E. max_connections

根据实际业务调整。4G 内存不适合支撑海量长连接。

  • 建议值:100 – 200。
  • 策略:配合连接池使用(如 HikariCP, Druid)。不要让应用直连数据库建立大量空闲连接。

F. thread_stack

  • 建议值:256K。
  • 原因:每个线程都会占用这个栈空间。如果 max_connections 很大,栈空间总和 = max_connections * thread_stack。适当减小可以节省内存。

2. 操作系统层面优化

A. 禁用 Swap(虚拟内存)

虽然理论上可以保留 Swap 作为最后防线,但在 4G 内存环境下,一旦触发 Swap,性能几乎不可用。

  • 操作:
    swapoff -a
    # 永久生效需编辑 /etc/fstab,注释掉 swap 行
  • 风险:如果 MySQL 真的 OOM,进程会被 KILL 掉。所以更要依靠上面的参数限制来防止内存溢出。

B. 调整 Swappiness

如果不想完全禁用 Swap,至少要让系统尽量少用 Swap。

  • 操作:
    sysctl vm.swappiness=1
    # 写入 /etc/sysctl.conf 永久生效

C. 关闭不必要的内核功能

  • 关闭 Transparent Huge Pages (THP):
    echo never > /sys/kernel/mm/transparent_hugepage/enabled
    echo never > /sys/kernel/mm/transparent_hugepage/defrag

    THP 会导致 MySQL 页错误延迟增加,影响性能。

3. SQL 与架构层面的“自救”

硬件受限,软件必须更聪明。

A. 索引优化

  • 只建必要的索引:每个索引都占用 Buffer Pool 空间。删除未使用的索引,尤其是前缀过长、区分度低的索引。
  • 覆盖索引:尽量让查询通过索引就能完成(Covering Index),减少回表,降低 I/O 和内存消耗。

B. 避免大事务和大查询

  • *禁止 `SELECT `**:明确指定需要的字段,减少网络传输和内存解析开销。
  • 分页优化:避免 LIMIT 1000000, 10 这种深分页。使用主键范围查询或游标分页。
  • 拆分大事务:将大事务拆分为小批次提交,减少 Undo Log 占用和锁持有时间。

C. 读写分离(低成本方案)

如果预算允许,加一台更便宜的 2G 或 4G 从库做只读节点。

  • 主库负责写,从库负责读。
  • 即使从库也很弱,也能分担主库的部分查询压力,特别是那些复杂的报表查询。

4. 监控与排查

4G 内存很脆弱,必须实时监控。

  • 监控指标:

    • Innodb_buffer_pool_pages_free:Buffer Pool 剩余页数,持续过低说明内存不足。
    • Threads_created vs Connections:如果 Threads_created 增长过快,说明连接创建销毁频繁,开销大。
    • Key_reads / Innodb_buffer_pool_read_requests:缓存命中率。InnoDB 主要看后者,理想情况应 > 99%。
    • Swap Usage:一旦 Swap 使用率超过 10%,立即报警并排查慢查询。
  • 工具推荐:

    • pt-query-digest:分析慢查询日志,找出最耗资源的 SQL。
    • mysqltuner.pl:启动后运行一次,它会给出基于当前负载的优化建议(仅供参考,别全信)。

5. 云厂商特定注意事项

如果你使用的是阿里云 ECS、腾讯云 CVM 等:

  • CPU 积分机制:如果是突发性能实例(如 t5, t6, s6 等基础型),CPU 有积分限制。MySQL 启动和备份时可能消耗大量 CPU,导致积分耗尽后被限速。建议选择标准型或通用型实例。
  • 云盘 IO 限制:4G 内存往往搭配入门级云盘。IO 瓶颈可能比内存更早出现。考虑将数据盘升级为 ESSD 或高性能 SSD,并开启异步 I/O。
  • 自动快照:定期快照备份,但不要在业务高峰期执行,以免占用 IO 资源。

总结 Checklist

  1. [ ] innodb_buffer_pool_size 设为 2G~2.5G(视其他应用而定)。
  2. [ ] innodb_log_file_size 设为 1G。
  3. [ ] 关闭 Query Cache。
  4. [ ] 设置 tmp_table_size 为 64M-128M。
  5. [ ] 禁用 Swap 或设置 swappiness=1。
  6. [ ] 关闭 Transparent Huge Pages。
  7. [ ] 审查所有慢查询,确保有合适索引。
  8. [ ] 启用监控告警,重点关注 Buffer Pool 命中率和 Swap 使用情况。

最后一句忠告:4G 内存跑 MySQL 8 是“极限操作”。如果业务增长,第一优先级应该是升级配置(哪怕升到 8G,成本增加不多,但体验天壤之别),而不是无限调优参数。技术优化有上限,硬件扩容才是王道。