LACP между Linux и коммутатором: bond 802.3ad

Настройка bond0 в режиме 802.3ad, хэширование и почему один поток не разгоняется до 2× скорости.

Агрегация двух гигабитных портов в один логический. Самое частое разочарование после настройки: «скопировал файл, а скорость те же 110 МБ/с». Это нормально — почему, ниже.

Linux (systemd-networkd)

# /etc/systemd/network/10-bond0.netdev
[NetDev]
Name=bond0
Kind=bond

[Bond]
Mode=802.3ad
TransmitHashPolicy=layer3+4
LACPTransmitRate=fast
MIIMonitorSec=100ms

# /etc/systemd/network/20-slaves.network
[Match]
Name=enp1s0f0 enp1s0f1
[Network]
Bond=bond0

Коммутатор

На стороне коммутатора — port-channel в режиме active (LACP), не on. Режим on поднимет агрегат без согласования, и при ошибке кабелирования получите петлю или потерю трафика.

interface range Gi1/0/1-2
 channel-group 1 mode active
interface Port-channel1
 switchport mode trunk

Почему один поток не быстрее

LACP распределяет не пакеты, а потоки: хэш от адресов и портов выбирает одно физическое соединение. Один TCP-поток всегда идёт по одному линку. Выигрыш виден, когда клиентов много. Политика layer3+4 распределяет лучше, чем дефолтная layer2, особенно когда трафик идёт через один шлюз (MAC у всех одинаковый).

Проверка

cat /proc/net/bonding/bond0

Смотрите, чтобы у обоих slave совпадал Aggregator ID. Если ID отличаются, проверьте подключение и состав port-channel на коммутаторе.

Как проверить оба линка

На передающем сервере посмотрите счётчики TX до и после одной большой передачи. Для входящего трафика сравните RX. Повторите с несколькими парами клиентов и серверов, чтобы у хэша появились разные потоки.

ip -s link show dev enp1s0f0
ip -s link show dev enp1s0f1

Если оба линка входят в активный агрегат, а при одной передаче растёт только один TX, это ожидаемо. Если участник в состоянии down, начните с него. Как драйвер выбирает исходящий порт, описано в руководстве по bonding.