Фабрика ЦОД spine-leaf на коммутаторах «Элтекс» с резервированием на всех уровнях

Отказоустойчивая сеть ЦОД по архитектуре spine-leaf с неблокирующей коммутацией и резервированием линков и устройств.

Решение по направлению

Сети и коммутация
Применение
Организация с собственным ЦОД, растущей виртуализацией и СХД
Производители
Элтекс
Реестр
оборудование и ПО из российских реестров

Задача

Типовая задача: классическая трёхуровневая сеть ЦОД ограничена по пропускной способности между стойками, а «узкие» аплинки не дают расти виртуализации и СХД. Нужен переход на горизонтально масштабируемую фабрику с предсказуемой задержкой «сервер-сервер», без единых точек отказа и с запасом портовой ёмкости — на оборудовании из реестра Минпромторга.

Решение

В основе фабрики — два уровня коммутации: spine из производительных коммутаторов «Элтекс» и leaf-коммутаторы «Элтекс» в каждой стойке. Каждый leaf подключается ко всем spine, что даёт равноудалённость любой пары серверов и неблокирующую передачу трафика «восток-запад» — критично для виртуализации и репликации СХД. Резервирование закладываем на каждом уровне: два spine, парные аплинки от каждого leaf, агрегирование каналов и дублирование блоков питания.

Отказоустойчивость подключения серверов и узлов СХД строим на MLAG-⁠парах leaf-коммутаторов: сервер видит два физических коммутатора как единый логический канал, и при выходе одного трафик продолжает идти по второму без простоя. Между leaf и spine поднимаем маршрутизацию с ECMP — балансировку по всем восходящим каналам и быструю сходимость при обрыве. Управление и телеметрию выносим в отдельный сегмент.

Портовую ёмкость leaf-уровня и число spine-каналов подбираем с запасом под рост «восток-запад» трафика — конкретные модели и количество определяются после обследования и расчёта. Перед внедрением проводим стендовые испытания: сходимость при обрывах, поведение MLAG при отказе коммутатора пары и совместимость с сетевыми картами серверов.

Состав

Состав решения: наименование, количество, примечание
НаименованиеКол-воПримечание
Коммутаторы уровня spine «Элтекс»2ядро фабрики, неблокирующая коммутация, ECMP
Коммутаторы уровня leaf «Элтекс»по 2 на стойкуToR-подключение серверов и СХД, MLAG-пары
Агрегирование каналов и MLAGпо проектурезервирование подключения серверов без простоя
Маршрутизация с ECMP между leaf и spineпо проектубалансировка и быстрая сходимость
Выделенный сегмент управления и телеметриипо проектумониторинг фабрики независимо от продуктива

Источник: типовой состав по направлению; модели и количество уточняются после обследования и расчёта.

Что даёт решение

  • Даёт горизонтально масштабируемую фабрику: новые стойки подключаются без переразводки ядра
  • Исключает единые точки отказа — резервирование на уровне устройств, линков и питания