在浪潮(Inspur)物理服务器上部署 Ubuntu 20.04 LTS,整体体验是比较顺畅的,因为 Canonical 对主流硬件的兼容性做得不错。但作为国内服务器市场的“老大哥”,浪潮机器在 BIOS/UEFI 设置、RAID 卡驱动以及内核模块加载上,确实有一些特有的“坑”或者说是需要特别注意的配置点。
以下是我在实际运维和交付过程中总结的几个关键注意事项,按优先级排序:
1. RAID 卡与存储控制器驱动(最关键)
这是安装阶段最容易遇到的问题。Ubuntu 20.04 内核虽然比较新,但可能默认不包含某些较新的浪潮专用 RAID 卡(如基于 LSI 或 Broadcom 芯片定制的卡)的二进制固件或驱动。
- 现象:安装程序无法检测到硬盘,或者只能看到一个很小的虚拟磁盘。
- 解决方案:
- 检查 RAID 模式:确保在 BIOS/UEFI 中,RAID 卡已经配置好逻辑卷(Logical Drive),并且模式设置为 AHCI 或 RAID 模式(取决于你的需求)。对于 Ubuntu 安装,通常建议先做好 RAID 阵列。
- 驱动加载:如果安装程序找不到硬盘,可能需要手动加载
igb、ixgbe或特定的 RAID 驱动。你可以尝试在安装界面按Ctrl+Alt+F2进入终端,使用modprobe加载驱动,然后回到安装界面刷新。 - 推荐做法:如果使用的是浪潮自带的 BMC/iBMC 管理功能,建议在初始化前通过 iBMC 确认 RAID 卡的固件版本是否最新。有时候,旧版 RAID 卡固件会导致 Linux 内核识别异常。
2. BIOS/UEFI 设置优化
浪潮服务器的 BIOS 选项非常丰富,默认设置往往偏向于 Windows Server 或通用稳定性,为了获得更好的 Linux 性能,建议调整以下参数:
- 虚拟化技术(Virtualization Technology):如果你打算运行 KVM、Docker 或虚拟机,务必在 BIOS 中开启 Intel VT-x / AMD-V 和 VT-d(I/O 虚拟化)。否则后续遇到权限问题会很头疼。
- 电源管理策略:将 Power Policy 设置为 “Performance Optimized” 或 “Maximum Performance”。Ubuntu 默认的 ACPI 电源管理在某些浪潮机型上可能导致 CPU 频率调节不稳定,影响数据库或高并发服务的性能。
- 启动模式:强烈建议使用 UEFI 模式 而非 Legacy BIOS。Ubuntu 20.04 对 UEFI Secure Boot 的支持较好,但为了减少麻烦,建议在 BIOS 中暂时关闭 Secure Boot。虽然 Ubuntu 支持签名密钥,但在生产环境中,关闭它可以避免因内核更新导致的启动失败问题。
- NUMA 设置:对于多路服务器(双路及以上),确保 NUMA(非统一内存访问)策略设置为 “Interleave” 或 “Local Only”,具体取决于你的应用特性。大多数通用负载建议保持默认或启用 Interleave 以获得更好的内存带宽利用率。
3. 网卡驱动与网络配置
浪潮服务器常配备 Intel X520、X710 或 Mellanox ConnectX 系列网卡。Ubuntu 20.04 内置了大部分 Intel 网卡的驱动(i40e, ixgbe),但 Mellanox 网卡可能需要额外处理。
- Mellanox 网卡:如果使用 InfiniBand 或以太网功能的 ConnectX 网卡,Ubuntu 20.04 默认可能只加载基础驱动。你需要安装
mlnx-ofed-kernel-modules包来获得完整功能,尤其是在做 RDMA 或高性能计算时。 - MAC 地址绑定:浪潮服务器有时会在 BIOS 中锁定 MAC 地址。如果更换网卡后 IP 不生效,检查
/etc/netplan/下的 YAML 配置文件,确保接口名称(如ens1f0)与实际ip link show输出一致。Linux 重启后接口名称可能会变,建议使用 netplan 的匹配规则(如match:部分)而不是硬编码接口名。
4. iBMC 带外管理与时间同步
浪潮的 iBMC 是标配,它与操作系统的时间同步至关重要。
- NTP 同步:确保操作系统内的 NTP 服务(systemd-timesyncd 或 chrony)与 iBMC 的时间源保持一致。如果两者时间偏差过大,会影响 Kerberos 认证、证书有效性以及分布式系统的一致性。
- IPMI 访问:如果需要远程管理,确保防火墙允许 IPMI over LAN(UDP 623 端口)。在 Ubuntu 20.04 中,
openipmi和ipmitool是必备工具。注意,iBMC 的用户权限模型较为严格,建议为自动化脚本创建专用用户,并限制其权限范围。
5. 内核参数与性能调优
Ubuntu 20.04 的内核版本通常是 5.4.x 或更高,这对新硬件支持很好,但针对服务器场景,建议手动调整一些 sysctl 参数:
- TCP 缓冲区:增加
net.core.rmem_max和net.core.wmem_max,特别是对于高吞吐量的网络服务。 - 文件描述符:修改
/etc/security/limits.conf,提高nofile的限制,避免在高并发连接下出现 “Too many open files” 错误。 - 禁用不必要的服务:浪潮服务器预装的某些监控XX(如 Inspur Agent)可能与 Ubuntu 的 systemd 冲突。如果不是必须,建议禁用这些自动启动的服务,以减少资源占用和潜在的安全风险。
6. 安全合规与审计
- SELinux/AppArmor:Ubuntu 默认使用 AppArmor。确保 AppArmor 配置文件没有阻止关键服务(如 MySQL、PostgreSQL、Nginx)的运行。如果发现服务启动失败,检查
dmesg | grep apparmor。 - SSH 加固:禁用 root 直接登录,强制使用密钥认证。这是基本的安全规范,也是等保测评的要求。
- 内核更新策略:浪潮服务器的主板芯片组和 RAID 卡驱动依赖特定内核版本。在进行
apt upgrade时,注意查看是否有内核相关包的更新提示。建议在生产环境升级内核前,先在测试机上验证驱动兼容性。
总结
在浪潮服务器上安装 Ubuntu 20.04,核心在于 “先软后硬”:
- BIOS 设置到位:关闭 Secure Boot,开启虚拟化,优化电源策略。
- RAID 卡驱动就绪:提前确认 RAID 卡型号和固件版本,必要时准备驱动盘。
- 网络配置灵活:使用 Netplan 动态管理接口,避免硬编码。
- 带外管理协同:确保 iBMC 与系统时间同步,便于后期运维。
只要处理好这几步,浪潮服务器上的 Ubuntu 运行会非常稳定。如果遇到具体问题,建议查阅浪潮官方提供的《Ubuntu 兼容性列表》或联系技术支持获取特定型号的驱动包。
云技术博客