Введение

Под агрегацией (агрегированием) сетевых каналов понимают объединение нескольких

каналов передачи данных в сетях Ethernet в один логический канал

. Агрегация позволяет увеличить пропускную способность

или повысить надёжность. Поведение

агрегированного сетевого канала зависит от выбранного режима работы. В общем случае, объединенные сетевые интерфейсы могут работать в режиме горячего резерва (отказоустойчивости) или в режиме балансировки нагрузки. Режим (политика) работы определяется параметрами (опциями) модуля ядра bonding. Полный список параметров:

Далее к рассмотрению представлены следующие режимы:

• Политика «активный-резервный» (active-backup)

• . Активен только один сетевой интерфейс из объединённых. Другой интерфейс может стать активным только в том случае, когда неработоспособен текущий активный интерфейс. Эта политика применяется для повышения отказоустойчивости;
• Политика агрегирования каналов по открытому стандартному протоколу LACP

• . Создаются агрегированные группы сетевых карт с одинаковой скоростью и дуплексом. При таком объединении передача данных задействует все каналы в активной агрегации, согласно стандарту IEEE 802.3ad.

• ;
• Политика адаптивной балансировки нагрузки (balance-alb).

• Активны все агрегированные сетевые интерфейсы в  режиме адаптивной балансировки исходящего и входящего трафика. Не требует дополнительной настройки на коммутаторе. Балансировка входящего трафика достигается путём ARP переговоров. Драйвер bonding перехватывает ARP ответы, отправляемые с локальных сетевых карт наружу, и переписывает MAC адрес источника на один из уникальных MAC адресов сетевой карты, участвующей в объединении. Таким образом различные пиры используют различные MAC адреса сервера. Балансировка входящего трафика распределяется последовательно (round-robin) между интерфейсами.

Примеры настройки агрегирования

В примерах предполагается, что

:

• Управление агрегированными сетевыми интерфейсами осуществляется с помощью службы networking. Если на компьютере установлена служба NetworkManager, то проверить список подключений и удалить и очистить подключения, использующие агрегируемые сетевые интерфейсы, например;

  Command
  sudo nmcli con show sudo nmcli con del "Проводное соединение 1" sudo nmcli con del "Проводное соединение 2" sudo ip address flush dev eth1 sudo ip address flush dev eth2

  Подробнее про варианты управления сетевыми интерфейсами см. Настройка сетевых подключений в

• Astra Linux;

• На каждом компьютере для агрегирования используются две сетевые карты с именами eth1 и eth2;
• Агрегирующий интерфейс создается с именем bond0.

Общие настройки для всех примеров для всех компьютеров

1. Установить пакеты ifenslave и iperf командой:

   Command
   sudo apt install ifenslave iperf

   Пакет ifenslave необходим для настройки агрегации и обеспечения работы агрегирующих интерфейсов, пакет iperf необязателен, но далее в примерах используется для тестирования.

2. Внести в конфигурационный файл /etc/network/interfaces следующие параметры:

   Блок кода
   auto eth1 eth2 bond0 iface eth1 inet manual iface eth2 inet manual

   Параметр auto включает автоматический запуск интерфейсов при загрузке компьютере (при перезапуске службы networking), параметр manual указывает, что настройка интерфейса не должна осуществляться через службу DHCP. Параметры настройки интерфейсов будут заданы далее в примерах. Далее нужно указать в файле /etc/network/interfaces параметры агрегирующего интерфейса.

Настройка агрегации в режиме active-backup

Настройка агрегации каналов в режиме active-backup рассмотрена на примере инфраструктуры, где

каждый компьютер подключен к сети

двумя соединениями

.

Image Removed

При настройке агрегации одному компьютеру будит присвоен адрес 10.1.1.2, другому - 10.1.1.3.

Для настройки и запуска агрегации в режиме active-backup в Astra Linux

:

1. На

каждом компьютере установить пакеты ifenslave и iperf командой: Commandsudoaptinstallifenslave iperf

Остановить службу работы сети командой:

Command
sudo systemctl stop networking

1. обоих компьютерах внести в конфигурационный файл /etc/network/interfaces

1. параметры

1. Параметры сетевых карт:
   auto eth3 iface eth3 inet manual auto eth4 iface eth4 inet manua

Блок кодаПараметры

1. агрегирующего интерфейса:

   Блок кода

auto bond0

2. iface bond0 inet static address <собственный_IP-адрес> netmask 255.255.255.0 pre-up modprobe bonding mode=active-backup arp_interval=100 arp_ip_target=<IP-адрес_другого_компьютера> post-down rmmod bonding

address <собственный_IP-адрес>
netmask
255.255.255.0

5. bond-mode active-backup bond-primary

eth3

6. eth1 bond-miimon 100 bond-downdelay

150

7. 200 bond-updelay 150 bond-slaves

eth3 eth4

8. eth1 eth2

   
   

   Информация
   Значение параметра bond-downdelay должно быть кратно значению параметра bond-miimon.

   Где вместо параметра

<IP-адрес_другого_компьютера>

9. <собственный_IP-адрес> указать на одном компьютере IP-адрес 10.1.1.

3

10. 2, на

другому

11. другом - 10.1.1.

2

12. 3, а вместо параметра

<собственный_IP-адрес> - наоброт,  10

13. <IP-адрес_другого_компьютера> - наоборот,  на одном компьютере 10.1.1.

2

14. 3, на

другому

15. другом - 10.1.1.

3.
Запустить службу работы сети

16. 2;

17. Активировать агрегирующий интерфейс командой:

    Command
    sudo

systemctl start networking.

18. ifup bond0

    
    

1. На одном компьютере выполнить команду iperf

1. :

   Command
   sudo iperf -s -i 1

   где:
   -s - запуск в режиме

1. сервера;
   -i - интервал между отчетами (в секундах)

Для проверки работоспособности агрегирования интерфейсов в режиме active-backup на ПК1 запустить команду iperf в качестве клиента с параметрами:

1. ;

2. На другом компьютере выполнить команду iperf:

   Command
   sudo iperf -c <IP-адрес_другого_компьютера> -p 5001 -i 1 -n 100M -t 60

   где:
   -c - ip-адрес сервера;
   -p - порт на котором работает сервер;
   -i - интервал между отчетами (в секундах);
   -n - количество байт для передачи;
   -t -

1. продолжительность выполнения теста

1. ;

2. Во время выполнения теста iperf  (тест длится 60 секунд, время можно увеличить)

1. :
   1. Отключить сетевой кабель из физического интерфейса которому соответствует имя

1. 1. eth1  (т.к. данный интерфейс является первичным согласно настройкам) и

1. 1. проверить отчеты теста, где можно увидеть наличие

1. 1. провала скорости, - это свидетельствует о том, что произошло переключении с одного физического интерфейса (

1. 1. eth1) на второй физический интерфейс (

1. 1. eth2)

1. 1. ;

1. 1. Подключить сетевой кабель обратно в физический интерфейс с именем

1. 1. eth1, после чего в журнале теста можно опять наблюдать наличие провала скорости,

1. 1. свидетельствующего о том, что произошло обратное переключение на активный интерфейс

1. 1. eth1 (согласно сетевым настройкам).

Настройка агрегации по стандарту IEEE 802.3ad (LACP)

Для настройки и запуска агрегации каналов по стандарту IEEE 802.3ad в

1. Установить пакет ifenslave командой:

sudo apt install ifenslave

Подгрузить модуль для ядра командой:

sudo modprobe bonding

Останавить службу работы сети командой:

sudo systemctl stop networking

Настроить конфигурационный файл interfaces командой:

Astra Linux:

1. Внести в конфигурационный файл /etc/network/interfaces

1. параметры агрегирующего интерфейса:

   Блок кода
   iface bond0 inet static address

В качестве примера приводится настройка агрегации каналов по стандарту IEEE 802.3ad для интерфейса bond0:

Пример

auto lo

iface lo inet loopback

auto eth0

iface eth0 inet manual

auto eth1

iface eth1 inet manual

auto bond0

iface bond0 inet static

1. 192.168.0.1

1. netmask 255.255.255.0

1. bond-mode

1. 802.3ad bond-miimon 100

1. bond-downdelay 200

1. bond-updelay 200

1. bond-xmit-hash-policy 1

1. bond-slaves eth1 eth2

   
   

   Информация
   Значение параметра bond-downdelay должно быть кратно значению параметра bond-miimon.

   
   

2. Активировать агрегирующий интерфейс командой:

   Command
   sudo ifup bond0

Убедиться, что сетевые интерфейсы, которые будут использоваться для агрегации каналов, больше нигде не используются и не настроены в других сетевых приложениях;

Запустить службу работы сети командой:

1. 
   

2. Для проверки статуса работы

1. сетевого интерфейса выполнить команду:
   

   Command
   cat /proc/net/bonding/bond0

1. где bond0

1. - имя интерфейса агрегированных каналов.

1. Пример вывода команды

1. :

   Блок кода
   Bonding Mode: IEEE 802.3ad Dynamic link aggregation

1. Transmit Hash Policy: layer2 (0)

1. MII Status: up

1. MII Polling Interval (ms): 100

1. Up Delay (ms): 0

1. Down Delay (ms): 200

1. 802.3ad info

1. LACP rate: slow

1. Active Aggregator Info:

1. Aggregator ID: 2

1. Number of ports: 2

1. Actor Key: 17

1. Partner Key: 13

1. Partner Mac Address: 00:14:a8:82:87:80

1. Slave Interface: eth0

1. MII Status: up

1. Link Failure Count: 1

1. Permanent HW addr: 00:30:48:59:e9:c6

1. Aggregator ID: 2

1. Slave Interface: eth1

1. MII Status: up

1. Link Failure Count: 0

1. Permanent HW addr: 00:30:48:59:e9:c7

1. Aggregator ID: 2

   Проверка считается успешной, если в выводе команды cat /proc/net/bonding/bond0 отображается строчка «Bonding Mode: IEEE 802.3ad Dynamic link aggregation» и все

1. агрегированные сетевые интерфейсы, например, «Slave Interface: eth0», находятся в статусе «MII Status: up».

Настройка режима адаптивной балансировки нагрузки balance-alb

Настройка агрегации каналов в режиме balance-alb рассмотрена на примере инфраструктуры, где

каждый из двух компьютеров подключен к сети передачи данных двумя соединениями.

Image Removed

Для настройки и запуска агрегации в режиме balance-alb в

1) Установить пакет ifenslave и iperf командой:

sudo apt install ifenslave iperf

2) Останавить службу работы сети командой:

sudo systemctl stop networking

Astra Linux:

1. Внести в конфигурационный файл /etc/network/interfaces

1. параметры агрегирующего интерфейса:

Пример

Настройки /etc/network/interfaces на ПК1:

auto eth3

iface eth3 inet manual

auto eth4

iface eth4 inet manual

# режим balance-alb

auto bond0

iface bond0 inet static

1. Блок кода
   iface bond0 inet static address <собственный_IP-адрес> netmask 255.255.255.0 pre-up modprobe bonding mode=balance-alb

1. post-down rmmod

address 10.1.1.1

netmask 255.255.255.0

1. bonding bond-mode 6

1. bond-miimon 100

1. bond-downdelay 150

1. bond-updelay 150

1. bond-slaves

Пример

Настройки /etc/network/interfaces на ПК2:

auto eth3

iface eth3 inet manual

auto eth4

iface eth4 inet manual

# режим balance-alb

auto bond0

iface bond0 inet static

pre-up modprobe bonding mode=balance-alb

post-down rmmod bonding

1. eth1 eth2

   Где вместо параметра <собственный_IP-адрес> указать на одном компьютере IP-адрес

1. 10.1.1.2

netmask 255.255.255.0

bond-mode 6

bond-miimon 100

bond-downdelay 150

bond-updelay 150

bond-slaves eth3 eth4

4) Убедиться, что сетевые интерфейсы, которые будут использоваться для агрегации каналов, больше нигде не используются и не настроены в других сетевых приложениях;

5) Запустить службу работы сети командой:

1. , на другом - 10.1.1.3;

2. Активировать агрегирующий интерфейс командой:

   Command
   sudo ifup bond0

1. 
   

2. Для проверки работоспособности агрегирования интерфейсов в режиме balance-alb

sudo iperf -s -i 1

где

-s - запуск в режиме сервера;

-i - интервал между отчетами (в секундах).

Для проверки работоспособности агрегирования интерфейсов в режиме balance-alb на ПК1 запустить команду iperf в качестве клиента с параметрами:

sudo iperf -c 10.1.1.2 -p 5001 -i 1 -n 100M -t 60

где

-c - ip-адрес сервера;

-p - порт на котором работает сервер;

-i - интервал между отчетами (в секундах);

-n - количество байт для передачи;

-t - время выполнения теста.

Все сетевые интерфейсы — 1 Гбит/с.

Во время выполнения теста iperf (тест длится 60 секунд, время можно увеличить) необходимо поочерёдно вытаскивать сетевой кабель из физического интерфейса на обоих ПК, выждать 5 секунд (время можно увеличить) и воткнуть сетевой кабель обратно.

После запуска выполнения теста в соседнем терминале выполнить команду:

ip -a

и посмотреть МАС-адреса на физических интерфейсах.

Вытащить один из сетевых кабелей и одном ПК, выполнить команду:

ip -a

в соседнем терминале, сравнить МАК-адреса интерфейсов с предыдущим выводом команды ip -a.

Повторить тест на обоих ПК поочерёдно.

1. :

   1. Проверить список сетевых устройств:

      Command
      Title ip link show
      ... 3: eth1: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast master bond0 state UP mode DEFAULT group default qlen 1000     link/ether 52:54:00:31:72:c7 brd ff:ff:ff:ff:ff:ff 4: eth2: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast master bond0 state UP mode DEFAULT group default qlen 1000     link/ether 52:54:00:61:6b:17 brd ff:ff:ff:ff:ff:ff 5: bond0: <BROADCAST,MULTICAST,MASTER,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP mode DEFAULT group default qlen 1000     link/ether 52:54:00:31:72:c7 brd ff:ff:ff:ff:ff:ff

      В выводе команды видно, что активны (UP) устройства eth1 и eth2, и одному из устройств (устройству eth1) назначен MAC-адрес устройства bond0 (для наглядности важные параметры отмечены шрифтом bold);

   2. Отключить сетевой кабель из активного сетевого интерфейса;

   3. Повторно проверить список сетевых устройств:

      Command
      Title ip link show
      ... 3: eth1: <NO-CARRIER,BROADCAST,MULTICAST,SLAVE,UP> mtu 1500 qdisc pfifo_fast master bond0 state DOWN mode DEFAULT group default qlen 1000     link/ether 52:54:00:61:6b:17 brd ff:ff:ff:ff:ff:ff 4: eth2: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast master bond0 state UP mode DEFAULT group default qlen 1000     link/ether 52:54:00:31:72:c7 brd ff:ff:ff:ff:ff:ff 5: bond0: <BROADCAST,MULTICAST,MASTER,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP mode DEFAULT group default qlen 1000     link/ether 52:54:00:31:72:c7 brd ff:ff:ff:ff:ff:ff

      В выводе команды видно, что устройство eth1 неактивно, а MAC-адрес устройства bond0 теперь назначен устройству eth2.

      Информация
      При возврате подключения первого устройства обратное переключение устройств не выполняется до момента отказа второго устройства.