Keepalived VIP漂移后网络不通？可能是交换机ARP表没刷新！手把手教你配置garp_master

Keepalived VIP漂移故障排查：从ARP表刷新到高可用架构优化

那天凌晨三点，手机突然响起刺耳的告警铃声——核心业务VIP访问异常。作为值班运维，我瞬间清醒，抓起笔记本就开始排查。这是一次典型的主备切换后VIP不通故障，最终发现是交换机ARP表未及时更新导致的。本文将完整还原这次故障的排查过程，并深入讲解如何通过garp_master_refresh等参数优化Keepalived配置，避免类似问题再次发生。

1. 故障现象与初步排查

当主节点发生故障时，Keepalived理论上应该能无缝切换到备用节点，VIP随之漂移。但在实际生产环境中，我们经常遇到VIP切换后网络不通的情况。这种故障往往表现为：

主备切换后，部分客户端无法访问VIP
故障恢复后，网络连接需要几分钟才能自动修复
通过直接访问备节点IP正常，但通过VIP访问失败

典型排查步骤：

确认Keepalived状态：systemctl status keepalived
检查VIP绑定情况：ip addr show
测试基础网络连通性：ping和traceroute
抓包分析ARP通信：tcpdump -i eth0 -nn arp

在我们的案例中，通过抓包发现了一个关键现象：当VIP从主节点切换到备节点后，网关仍在向旧的主节点MAC地址发送数据包。这说明交换机的ARP表没有及时更新。

2. ARP协议与交换机表项机制解析

要理解这个故障的根本原因，我们需要深入理解ARP协议和交换机的表项维护机制。

2.1 ARP协议工作原理

ARP（Address Resolution Protocol）负责将IP地址解析为MAC地址，其基本工作流程如下：

主机A想与主机B通信，但不知道B的MAC地址
主机A广播发送ARP请求："谁的IP是B的IP？"
主机B单播回复ARP响应："我的MAC地址是XX:XX:XX:XX:XX:XX"
主机A将B的IP-MAC映射存入本地ARP缓存

2.2 交换机ARP表老化机制

交换机维护的ARP表项不是永久保存的，而是有老化时间（通常为4小时）。影响ARP表项更新的关键参数：

参数	默认值	说明
老化超时时间	4小时	ARP表项保留的最长时间
老化探测次数	3次	超时后尝试探测的次数
老化探测模式	混合	最后1次为广播，其余为单播

当Keepalived发生主备切换时，新的Master节点会发送无偿ARP（GARP）来通知网络设备更新ARP表。但问题在于：

默认情况下，Keepalived只在切换时发送一次GARP
如果交换机当时不可达（如短暂故障），就会错过这次更新
在交换机恢复后，由于它已有旧的ARP表项，不会主动发起ARP请求

3. Keepalived的GARP配置优化

针对上述问题，Keepalived提供了多个与GARP相关的配置参数，可以显著提高VIP切换的可靠性。

3.1 关键配置参数

在/etc/keepalived/keepalived.conf的vrrp_instance段中添加以下配置：

vrrp_garp_master_delay 1 # 成为Master后首次GARP的延迟(秒) vrrp_garp_master_repeat 2 # 首次GARP发送的重复次数 vrrp_garp_master_refresh 60 # Master状态时定期刷新GARP的间隔(秒) vrrp_garp_master_refresh_repeat 2 # 每次刷新发送的GARP数量 vrrp_garp_interval 0.001 # GARP报文之间的间隔(秒)

3.2 参数配置建议

根据不同的网络环境，推荐以下配置方案：

对于高稳定性要求的金融系统：

设置较短的刷新间隔（30-60秒）
增加每次发送的GARP数量（2-3个）
配合较短的ARP老化时间（如30分钟）

对于普通业务系统：

中等刷新间隔（2-5分钟）
保持默认的GARP数量（1-2个）
与网络团队确认交换机的ARP老化时间

测试验证方法：

使用tcpdump抓包观察GARP发送频率
手动触发主备切换，验证VIP恢复时间
模拟网络闪断，测试自动恢复能力

4. 生产环境最佳实践

经过多次故障复盘和优化，我们总结出以下Keepalived高可用部署的最佳实践：

4.1 网络架构建议

在交换机上适当调低ARP老化时间（建议30分钟到2小时）
确保交换机和Keepalived节点之间的网络稳定
考虑使用多网卡绑定提高链路可靠性

4.2 Keepalived配置优化

完整的优化配置示例：

vrrp_instance VI_1 { state MASTER interface eth0 virtual_router_id 51 priority 100 advert_int 1 authentication { auth_type PASS auth_pass 1111 } virtual_ipaddress { 192.168.1.100/24 dev eth0 } # GARP优化配置 vrrp_garp_master_delay 1 vrrp_garp_master_repeat 2 vrrp_garp_master_refresh 60 vrrp_garp_master_refresh_repeat 2 vrrp_garp_interval 0.001 # 其他优化参数 vrrp_priority -20 # 故障时降低优先级速度 notify_master "/etc/keepalived/notify.sh master" notify_backup "/etc/keepalived/notify.sh backup" notify_fault "/etc/keepalived/notify.sh fault" }