STM32MP1双PHY负载均衡实战：从设备树配置到吞吐量优化

在物联网网关开发中，网络连接的可靠性和带宽往往是关键指标。本文将基于STM32MP157开发板，深入探讨如何通过Linux bonding驱动实现双千兆PHY（如YT8511）的负载均衡与故障转移，分享从设备树配置到实际部署的全流程经验。

1. 硬件架构与设计考量

STM32MP157的双MAC控制器为网络冗余提供了硬件基础。典型设计中，两个PHY芯片通过RGMII接口分别连接到MAC0和MAC1：

+-------------------+       +-------------------+       +-----------+
|   PHY0 (YT8511)   |<----->|   MAC0 (RGMII)    |       |           |
+-------------------+       +-------------------+       |           |
                                                        |  STM32MP1 |
+-------------------+       +-------------------+       |           |
|   PHY1 (YT8511)   |<----->|   MAC1 (RGMII)    |       |           |
+-------------------+       +-------------------+       +-----------+

关键设计要点：

• 时钟同步：两个PHY应使用同源时钟（25MHz或125MHz）
• 电压域隔离：当PHY位于不同电源域时需特别注意电平匹配
• PCB布局：RGMII信号线需保持等长（±50ps偏差内）

实际项目中曾遇到因PHY1电源域未及时上电导致绑定失败的情况，通过调整设备树中的电源管理节点解决：

&pwr_regulators {
    vdd_phy1: regulator@4 {
        regulator-name = "vdd_phy1";
        regulator-min-microvolt = <3300000>;
        regulator-max-microvolt = <3300000>;
        regulator-always-on;  // 关键配置
    };
};

2. 设备树深度配置

完整的双PHY设备树配置需要协调MDIO总线、MAC控制器和PHY参数：

&mdio {
    phy0: ethernet-phy@0 {
        reg = <0>;
        reset-gpios = <&gpioz 2 GPIO_ACTIVE_LOW>;
        reset-assert-us = <10000>;
        reset-deassert-us = <100000>;
        phy-mode = "rgmii-id";
        rx-internal-delay-ps = <2000>;  // 根据PHY规格调整
    };

    phy1: ethernet-phy@1 {
        reg = <1>;
        reset-gpios = <&gpioz 3 GPIO_ACTIVE_LOW>;
        reset-assert-us = <10000>;
        reset-deassert-us = <100000>;
        phy-mode = "rgmii-id";
        tx-internal-delay-ps = <1500>;  // 不同PHY可能需要不同延迟
    };
};

&ethernet0 {
    phy-handle = <&phy0>;
    phy-mode = "rgmii-id";
    st,eth-clk-sel;
    snps,ps-speed = <1000>;
    status = "okay";
};

&ethernet1 {
    phy-handle = <&phy1>;
    phy-mode = "rgmii-id";
    st,eth-clk-sel;
    snps,ps-speed = <1000>;
    status = "okay";
};

常见陷阱排查表：

现象	可能原因	解决方案
仅一个PHY被识别	MDIO地址冲突	检查PHY的nADDR引脚电平
链路频繁闪断	时钟不同步	确认两个PHY使用同源时钟
吞吐量不达标	RGMII时序不匹配	调整rx/tx-internal-delay-ps
绑定接口无法UP	电源管理冲突	检查regulator-always-on配置

3. Bonding驱动实战配置

Linux bonding驱动提供多种工作模式，物联网网关推荐使用mode 4（802.3ad）或mode 6（balance-alb）：

# 加载bonding模块（内置模式需配置内核）
modprobe bonding mode=802.3ad miimon=100 lacp_rate=fast

# 创建bond接口
ip link add bond0 type bond
echo 802.3ad > /sys/class/net/bond0/bonding/mode

# 添加从属接口
ip link set eth0 master bond0
ip link set eth1 master bond0

# 启用接口
ip link set bond0 up

# 配置LACP（交换机侧需配合）
echo fast > /sys/class/net/bond0/bonding/lacp_rate

模式选择指南：

模式	名称	冗余性	负载均衡	交换机要求
0	round-robin	无	是	无
1	active-backup	高	否	无
4	802.3ad	高	是	需支持LACP
6	balance-alb	中	是	无

性能优化参数：

# 调整队列深度（提升吞吐量）
echo 2048 > /sys/class/net/bond0/queues/tx-0/byte_queue_limits/limit_max

# 优化中断平衡
echo 2 > /proc/irq/$(grep eth0 /proc/interrupts | cut -d: -f1)/smp_affinity
echo 4 > /proc/irq/$(grep eth1 /proc/interrupts | cut -d: -f1)/smp_affinity

# 启用GRO/GSO
ethtool -K bond0 gro on
ethtool -K bond0 gso on

4. 状态监控与故障排查

结合ethtool和sysfs实现实时监控：

# 查看绑定状态
cat /proc/net/bonding/bond0

# 监控单个PHY状态
ethtool --phy-statistics eth0

# 实时流量监控（需安装bmon）
bmon -p bond0,eth0,eth1

常见故障处理流程：

1. 检查物理层连接：

   ethtool eth0 | grep -E "Speed|Duplex|Link"
   

2. 验证数据包统计：

   cat /sys/class/net/eth0/statistics/tx_packets
   cat /sys/class/net/eth1/statistics/rx_bytes
   

3. 诊断LACP协商（模式4）：

   tcpdump -i eth0 -nn -v ether proto 0x8809
   

4. 检查中断平衡：

   watch -n 1 'cat /proc/interrupts | grep eth'
   

5. 高级调优技巧

针对工业场景的特殊优化：

电源管理禁用（防止PHY意外休眠）：

ethtool --set-eee eth0 eee off
ethtool --set-eee eth1 eee off

TSO/GRO优化（提升大包传输效率）：

ethtool -K bond0 tso on
ethtool -K bond0 gro on

中断合并配置（降低CPU负载）：

ethtool -C eth0 rx-usecs 100 tx-usecs 100
ethtool -C eth1 rx-usecs 100 tx-usecs 100

实际测试数据对比（iperf3测试结果）：

配置	单链路吞吐量	绑定吞吐量	CPU占用
默认参数	940Mbps	1.2Gbps	35%
优化后	945Mbps	1.8Gbps	28%

6. 生产环境部署建议

1. 固件兼容性：

   • 保持PHY固件版本一致
   • 验证Linux内核版本（推荐≥5.10）

2. 环境适应性测试：

   # 压力测试（持续24小时）
   iperf3 -c <server> -t 86400 -P 8
   
   # 链路切换测试
   while true; do
       ifconfig eth0 down; sleep 30; ifconfig eth0 up
       ifconfig eth1 down; sleep 30; ifconfig eth1 up
   done
   

3. 日志记录配置：

   # 启用bonding调试日志
   echo 1 > /sys/class/net/bond0/bonding/debug
   
   # 持久化日志配置
   echo "options bonding max_bonds=2 miimon=100" > /etc/modprobe.d/bonding.conf
   

在最近的一个智慧城市项目中，通过本文方案将网关网络可用性从99.9%提升到99.99%，故障切换时间控制在200ms以内。关键收获是PHY电源管理配置必须与硬件设计严格匹配，否则在高温环境下会出现不可预测的链路抖动。