Кейс: как «Россети Сибирь» построили устойчивую MPLS-сеть на базе магистральных маршрутизаторов ME

Для многих предприятий 2022 год стал точкой переосмысления: рынок столкнулся с необходимостью по-новому взглянуть на сетевую инфраструктуру. Оборудование, которое ещё вчера считалось безальтернативным, перестало получать обновления и поддержку. Для компаний масштаба ПАО «Россети Сибирь», отвечающих за работу энергосистем огромного округа, этот период дал старт обновлению магистральной сети.

Тысячи объектов передачи и распределения электроэнергии «Россети Сибири», дочернего предприятия ПАО «Россети», расположены на территории всей Сибири: в республиках Алтай, Бурятия, Тыва и Хакасия, в Алтайском, Забайкальском и Красноярском краях, в Кемеровской и Омской областях. Остаётся одной из крупнейших в Сибирском и Дальневосточном федеральных округах, поэтому обеспечение работоспособности оборудования – вопрос, касающийся миллионов домохозяйств.

В этих условиях в компании начали искать замену уже устаревающим и неподдерживаемым маршрутизаторам зарубежного вендора для мультисервисной MPLS-сети.

Масштабная модернизация требовала выстраивания новой опорной архитектуры. Главная цель: повысить доступность корпоративных и технологических сервисов во всех филиалах, увеличить пропускную способность каналов связи – всё это на отечественном оборудовании.

Требования к новой инфраструктуре были строгими:

• полная совместимость с уже существующими устройствами;
• возможность поэтапной миграции;
• высокая производительность;
• поддержка технологии MPLS-TE;
• готовность производителя дорабатывать ПО под реальные сценарии.
   

Так в архитектуру решения вошли магистральные маршрутизаторы Eltex серии ME. Внедрение началось в 2022 году и продолжается по настоящее время. Проект включает не только установку оборудования, но и постоянную работу по развитию функциональности, адаптации под требования компании и техническую поддержку.

Для построения MPLS-сети мы выбрали модели ME5100S (10 шт.) и ME5200S (2 шт.). Это магистральные маршрутизаторы с аппаратной обработкой трафика и большим объёмом буферной памяти. Они поддерживают ключевые протоколы маршрутизации IPv4/IPv6 и включают исчерпывающий набор MPLS-сервисов.

Транспортная сеть компании выстроена на базе технологии MPLS-TE (MPLS Traffic Engineering). Этот механизм позволяет не просто передавать трафик по меткам, а управлять путями его прохождения с учётом загрузки каналов, резервирования полосы и требований к отказоустойчивости.

Магистральные маршрутизаторы Eltex ME стали фундаментом этой инфраструктуры. С помощью оборудования мы смогли обеспечить работу ключевых механизмов и протоколов:

• OSPF – протокол динамической маршрутизации. Он формирует опорную топологию сети и синхронизирует маршрутную информацию между узлами.
• BGP L3VPN – расширение для изоляции и транспорта VPN-трафика. Механизм позволяет передавать маршруты частных виртуальных сетей через инфраструктуру провайдера, сохраняя при этом разделение филиалов, технологических сервисов и корпоративных подсетей внутри общей магистрали.
• RSVP-TE – расширение протокола резервирования ресурсов (RSVP). Оно используется для построения LSP-туннелей с учётом загрузки каналов и контроля того, каким именно путём пойдёт трафик.

Помимо необходимых функций для построения MPLS-сети, заказчик получил другие возможности, характерные для серии ME. Подробнее о возможностях оборудования можно узнать в решении.

Переход на новую платформу выполнялся поэтапно, в действующей инфраструктуре. На всём протяжении проекта требовалось сохранять полную работоспособность сети. В энергосистеме, обеспечивающей светом и теплом целые регионы, простои недопустимы.

Подход для этой задачи выбрали аккуратный, практически хирургический – поэтапно добавлять новые устройства в архитектуру, фиксируя и исправляя отклонения в работе.

Наша команда вместе со специалистами ПАО «Россети Сибирь» ежедневно взаимодействовали друг с другом. Процесс распланировали в несколько этапов.

Этап 1. Тестирование совместимости

На этом этапе было важно добиться совместимости оборудования Eltex с продуктами зарубежного вендора при реализации стека протоколов MPLS-TE. В сеть сначала ввели один маршрутизатор ME5100S.

В ходе тестирования инженеры изучили поведение протоколов OSPF, BGP L3VPN и RSVP-TE. Выявленные отличия в реализации MPLS-TE фиксировались детально: где устаревшее оборудование строило тоннель так, а наше – иначе; какие параметры требовали уточнения; как ведёт себя сеть при отказах. Основная проблема касалась именно особенностей построения тоннелей. Это стало основой для последующей отладки.

Этап 2. Совместная отладка

Первый этап показал, какие сценарии MPLS-TE требуют доработки. Следом началась плотная инженерная работа с ежедневной коммуникацией между специалистами ПАО «Россети Сибирь» и командой Eltex.

Мы выстроили чёткий процесс:

• вели непрерывный мониторинг состояния маршрутизатора ME5100S и фиксировали особенности работы;
• специалисты «Россети Сибирь» передавали наблюдения по поведению MPLS-стека в реальной среде;
• наша команда оперативно выпускала корректирующие обновления ПО;
• после каждого обновления проводилась повторная проверка сценариев, чтобы убедиться, что новая версия полностью соответствует установленным требованиям.

Этап 3. Опытная эксплуатация

После первых тестов и отладки проект вошёл в самый динамичный этап – включение нескольких ME5100S и ME5200S в уже работающую инфраструктуру. Устройства стали резервными маршрутизаторами мультисервисной сети.

Это была важная стадия: оборудование функционировало под реальной нагрузкой, а не в лабораторных сценариях. С каждой новой версией ПО стек MPLS-TE на маршрутизаторах Eltex точнее повторял ту логику, на которой годами держалась магистраль «Россети Сибирь».

Во время работы над модернизацией сети специалистами заказчика активно использовались материалы из Eltex Knowledge Base и документация по ранним версиям ПО.

Этап 4. Промышленная эксплуатация

После того как стек MPLS-TE показал стабильность в реальной среде, началась планомерная замена оборудования во всех филиалах компании: сначала резервных маршрутизаторов, затем – основных.

При этом ключевое требование заказчика – никаких перерывов в доступности сервисов – выполнялось на каждом этапе.

Новая транспортная сеть, отмечает заказчик, стала заметно быстрее и устойчивее. Главное – она дала компании уверенность, что инфраструктура готова к будущим нагрузкам. Проект принёс ощутимые результаты:

• производительность магистрали выросла минимум в 10 раз – со 100 Мбит/с до 2 Гбит/с на ряде каналов между филиалами;
• импортное оборудование заменено на российскую платформу с живой технической поддержкой;
• транспортная инфраструктура заказчика получила запас масштабируемости и возможность дальнейшего развития.

«Огромную роль сыграла служба поддержки, а именно её конструктивность при оценке и выборе решений для реализации требуемого функционала, а также оперативность в обратной связи и выпуске необходимых обновлений ПО. Были преграды, но благодаря обоюдному желанию – нашему и Eltex – мы довели ME до промышленной эксплуатации в разумные сроки и получили функциональный, рабочий продукт».

Михаил Кустов, руководитель группы телекоммуникаций и связи ПАО «Россети Сибирь»

Компания продолжает развивать сотрудничество с Eltex в нескольких направлениях:

• замена сетевого оборудования (с использованием коммутаторов MES, сервисных маршрутизаторов ESR);
• обновление телефонии;
• работа с беспроводным широкополосным доступом;
• использование программных продуктов Eltex.

Также в планах – модернизация L3-ядра сети ЦОД с использованием маршрутизаторов ME и коммутаторов MES.

«Это сотрудничество стало для нас важным инженерным опытом. Мы получили предметную обратную связь от команды "Россети Сибирь". Благодаря этому доработали функциональность ME и улучшили продукт в целом. Подобные проекты не только решают задачи заказчика – они позволяют нам расти как производителю».

Владимир Малофеев, руководитель отдела продаж направления ШПД Eltex