努力
加油

CentOS或Ubuntu系统下,Redis和MySQL共存部署的最佳实践是什么?

在 CentOS 或 Ubuntu 上让 Redis 和 MySQL 共存,核心矛盾从来不是“能不能装在一起”,而是资源争抢导致的性能抖动。

很多新手(甚至一些老手)喜欢用 yum install redis mysql 或者 apt-get install 一把梭哈,然后发现高并发下 MySQL 慢查询飙升,Redis 频繁过期。这是因为默认配置下,两个服务对 CPU、内存、磁盘 I/O 的调度策略是“各自为政”的。

作为在一线扛过流量洪峰的人,我总结了一套经过验证的“共存最佳实践”,分为 系统层隔离、内核参数调优、应用层配置 和 监控告警 四个维度。


一、 系统层:别信默认值,必须做资源限制

默认安装的 Redis 和 MySQL 都会尝试榨干服务器资源。你需要通过 Linux 原生的 cgroups 或 systemd 来限制它们的最大使用量。

1. 内存隔离(最关键)

MySQL 是吃内存大户(InnoDB Buffer Pool),Redis 是内存型数据库。一旦 OOM(内存溢出),两者都会挂,且恢复时间极长。

  • 原则:预留 20%-30% 内存给操作系统和其他进程。
  • 操作建议:
    • CentOS/RHEL: 使用 systemd 的 MemoryLimit 或 MemoryMax(新版)。
      # /etc/systemd/system/mysqld.service.d/override.conf
      [Service]
      MemoryMax=4G
    • Ubuntu: 同样使用 systemd 控制,或者更细粒度地使用 cgroupfs。
    • Redis: 设置 maxmemory,并务必指定淘汰策略(如 allkeys-lru),防止 Redis 吃掉所有可用内存导致 MySQL 被 swap 出去。

2. CPU 隔离与优先级

  • MySQL:通常是计算密集型(复杂 SQL 解析、排序)。建议给予较高的 CPU 权重。
  • Redis:单线程模型(6.0+ 有异步 IO 但主逻辑仍集中),对延迟极度敏感。
  • 操作建议:
    • 使用 nice 和 ionice 命令调整进程优先级。
    • 对于关键业务,可以将 Redis 绑定到特定的 CPU 核上(CPU Affinity),避免上下文切换开销。
      # 示例:将 mysqld 绑定到核心 0-1,redis-server 绑定到核心 2-3
      taskset -pc 0,1 $(pidof mysqld)
      taskset -pc 2,3 $(pidof redis-server)

二、 内核参数调优:Linux 是为数据库优化的吗?

默认的 Linux 内核参数是为通用场景设计的,跑数据库必须改 /etc/sysctl.conf。

1. 内存管理(vm.*)

# 降低 swappiness,尽量避免使用 Swap。Swap 对 MySQL 和 Redis 都是致命的延迟杀手。
vm.swappiness = 10

# 提高 inode 缓存效率
vm.vfs_cache_pressure = 50

# 如果内存很大,适当增加 dirty pages 的比例,减少刷盘频率
vm.dirty_ratio = 20
vm.dirty_background_ratio = 5

2. 网络栈优化(net.*)

Redis 和 MySQL 都重度依赖网络。

# 开启 TCP 快速回收,处理 TIME_WAIT 堆积
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_fin_timeout = 30

# 增大本地端口范围,防止短连接耗尽端口
net.ipv4.ip_local_port_range = 1024 65535

# 增大接收/发送缓冲区,提升吞吐量
net.core.rmem_max = 16777216
net.core.wmem_max = 16777216
net.ipv4.tcp_rmem = 4096 87380 16777216
net.ipv4.tcp_wmem = 4096 65536 16777216

3. 文件系统(ext4/xfs)

  • 挂载选项:使用 noatime 或 relatime。MySQL 频繁读文件,atime(访问时间)会导致大量的无谓写入。
    # /etc/fstab 示例
    /dev/sdb1 /data ext4 defaults,noatime,nodiratime 0 2
  • I/O 调度器:如果是 SSD,设置为 none 或 mq-deadline;如果是 HDD,设置为 bfq 或 deadline。
    # 查看当前调度器
    cat /sys/block/sda/queue/scheduler
    # 修改(以 deadline 为例)
    echo "deadline" > /sys/block/sda/queue/scheduler

三、 应用层配置:各司其职

1. MySQL (InnoDB) 调优要点

  • innodb_buffer_pool_size:设置为物理内存的 50%-70%(如果只跑 MySQL)。如果共存,需根据 Redis 的 maxmemory 倒推。
  • innodb_log_file_size:适当增大,减少刷盘频率,提升写性能。
  • sync_binlog & innodb_flush_log_at_trx_commit:
    • 如果数据一致性要求极高:1 和 1(最安全,性能最低)。
    • 如果能容忍少量数据丢失(如缓存同步源):0 和 2(性能最高)。
    • 共存场景建议:除非是核心交易数据,否则建议适度放宽,减轻磁盘压力。

2. Redis 调优要点

  • maxmemory:必须设置!建议设为总内存的 30%-40%(留给 MySQL 和 OS)。
  • maxmemory-policy:allkeys-lru 或 volatile-lru。
  • appendonly:开启 AOF,并设置 appendfsync everysec。这是平衡性能和数据安全性的黄金组合。
  • hz:默认 10。如果机器负载不高,可以降到 5 或 10,减少后台任务执行频率。

四、 部署架构建议:分层而非混部

虽然技术上可以共存,但从架构稳定性角度,我有以下建议:

方案 A:轻量级场景(开发/测试/小型项目)

  • 适用:日活 < 10万,QPS < 1000。
  • 做法:同一台机器,严格遵循上述的内存限制和IO 调度。
  • 关键:定期重启 Redis 释放碎片(启用 activedefrag yes),监控 MySQL 的 Slow Query Log。

方案 B:生产环境推荐(分离部署)

  • 适用:任何正式业务。
  • 做法:
    • MySQL 独享:分配大内存、高性能 SSD 磁盘。
    • Redis 独享:分配低延迟、高带宽的网络环境。
    • 为什么? 因为两者的故障模式不同。MySQL 崩溃可能需要长时间恢复(WAL 回放),而 Redis 崩溃只需几秒加载 RDB/AOF。如果混部,MySQL 的高 IO 会拖慢 Redis 的网络包处理,反之亦然。

方案 C:折中方案(Docker/K8s)

如果你一定要在同一台宿主机上运行多个实例,强烈建议使用容器化。

  • 利用 Docker 的 --memory 和 --cpus 参数进行硬隔离。
  • 利用 K8s 的 Resource Quota 进行集群级别的资源管控。
  • 这样即使某个 Pod 异常,也不会影响宿主机的稳定性。

五、 监控与告警:别等挂了才知道

共存环境下,一个服务的异常往往会掩盖另一个服务的症状。你需要关注以下指标:

  1. 整体层面:

    • load average:如果持续高于 CPU 核数,说明过载。
    • iowait:如果超过 20%,说明磁盘是瓶颈,MySQL 和 Redis 都会变慢。
    • swap usage:绝对禁止出现 Swap 使用。一旦有 Swap,立即扩容或迁移。
  2. MySQL 专属:

    • Threads_connected vs max_connections。
    • Innodb_buffer_pool_hit_rate:低于 99% 需要调整 buffer pool。
    • Slow_queries 增长趋势。
  3. Redis 专属:

    • used_memory vs maxmemory。
    • evicted_keys:如果有驱逐,说明内存紧张,需扩容或优化 Key 结构。
    • instantaneous_ops_per_sec:检查是否达到单机极限。

总结

CentOS/Ubuntu 下 Redis 和 MySQL 共存的最佳实践,本质上是资源竞争的管理艺术。

  1. 不要依赖默认配置,手动限制内存上限。
  2. 关闭 Swap,优化内核网络参数。
  3. 区分优先级,通过 CPU 亲和性和 Nice 值保障 Redis 的低延迟。
  4. 终极建议:如果预算允许,拆分部署永远是第一选择。共存只是成本妥协下的无奈之举,做好隔离和监控是底线。