Пиринговая платформа будущего Ильин Александр Технический директор MSK-IX

Пиринг сейчас Падение цены транзита, рост популяции интернет проектов делает более выгодным обмен трафиком на более высоких скоростях Рынок в ожидании выгодных ценовых 100G решений MSK-IX перешагнул 1Tbit/sec (вступил в клуб «T») собрав свыше 370 участников у Московской точки обмена Активное развитие региональных точек обмена MSK-IX 5 years * telegeography.com *

Тенденции развития IX Повышение эффективности IX – рост распределенных контент- проектов. IX как инструмент раздачи контента Активный рост межрегиональных игроков Движение CDN в регионы Развитие новых услуг и технологий (IPv6, Anycast DNS, NTP сервисов) Повышение защищенности услуг и сервисов с помощью технологий защиты от атак Внедрение гибких инструментов контроля за состоянием обмена трафиком

Задачи IX будущего Наличие надежной масштабируемой инфраструктуры: –Системы оптического уплотнения –Эффективное использование имеющихся каналов –Возможность быстрого наращивания емкости Новый подход к сетевой архитектуре –Пересмотр имеющихся топологии сети –Выбор новых протоколов и решений Новое оборудование, способное обеспечить –Высокую плотность –Масштабируемость –Гибкость решения –Развитие функционала

Эффективность решений Рост затрат на оборудование (большая плотность, энергопотребление) Рост затрат на инфраструктуру (оптоволокно, WDM) Cнижение цен на 100G второго поколения может существенно улучить ситуацию * * Brocade, Greg Hankins, Euro-IX forum Время с момента выхода на рынок Падение цен на трафик и транзит

Движение в сторону WDM Рост инфраструктуры: Рост нагрузки на IX в отсутствии экономически выгодных 40/100G решений в масштабах города (до 80км) Высокая стоимость аренды оптики для региональных проектов Приводит к необходимости: Внедрения систем оптического уплотнения WDM. Наращивания плотности line-rate 10G портов Сложности: Высокая стоимость активных WDM решений, как следствие переход к более экономичным пассивным Серьезные проблемы интеграции оптических WDM модулей с имеющимся оборудованием (совместимость, наличие встроенной DDMI диагностики, температурные особенности, более высокие требования по мощности из-за затухании на линии) Необходимость резервирования с использованием разных трасс либо посредством оптических переключателей, либо посредством дублирующих систем WDM

Выбор платформы WDM Используется –MRV (активное оборудование) Проводятся тесты пассивного оборудования –SNR –Modultech –ADVA –Transmode Задачи тестов – совместимость вставок с оборудованием, конструктив мультиплексоров и системы в целом, возможность автоматического переключения Планируется завершение к 3 кв г.

Возможные топологии кольцо Особенности: Кол-во узлов N Кол-во линий связи N Полоса пропускания магистрали: N*L Диаметр N/2

Возможные топологии двойное ядро Особенности: Кол-во узлов N Кол-во ядер 2 Кол-во линий связи 2N+1 Полоса пропускания магистрали: 2NL+L Диаметр 2 Отказоустойчивость по отношению к падению одного из ядер и одной из линий связи

Возможные топологии несколько ядер Особенности: Кол-во узлов N Кол-во ядер С Кол-во линий связи C(N+1) Полоса пропускания магистрали: LC(N+1) Диаметр 2 Отказоустойчивость по отношению к падению С-1 из ядер и части линий связи

Возможные топологии Full Mesh Особенности: Кол-во узлов N Кол-во линий связи N*(N-1)/2 Полоса пропускания магистрали: LN*(N-1)/2 Диаметр 1 Отказоустойчивость по отношению к падению любого узла и части линий связи

Экономия vs надежность IX?

Победитель двойное ядро Плюсы: Гибкая масштабируемость Продублированная надежность Малый диаметр сети Экономичное использование линий связи Отказоустойчивость по отношению к падению одного из ядер и любой из линий связи Минусы: Затраты на оптику Критичное расположение ядер Необходимость наличия оптики от каждого узла до каждого из ядер

Выбор платформы IX будущего Проведены тесты –Extreme X670, X670V, Black Diamond X8 (сентябрь 2012) –Arista 7050S-24, 7124S (июль- сентябрь 2012) –Brocade MLX-4 (октябрь-декабрь 2012) –Juniper MX240 (октябрь-декабрь 2012) Выбран Extreme в качестве платформы будущего IX

Итоги тестов Идеального вендора не существует, все хороши! Arista, Brocade поддерживают хорошо знакомый CLI Часть вендоров используют собственные чипы, другие работают на Broadcom. Набор функционала отличается. Ошибки в ПО вендора дольше устраняются (задействуется больше людей) Активно изучались технологии TRILL, SPB, MLAG. Внимательно протестировали MLAG и убедились в работоспособности у Arista и Extreme. Проблемы с L2 фильтрами у некоторых вендоров. Требуется доработка. Имеются ограничения ресурсов для массового применения «сложных» фильтров. Не все поддерживают 1G оптику в 10G портах. Архитектура больших коммутаторов требует пристального внимания с целью защиты от возможных потерь Особое внимание уделяется модулям коммутаторов и возможность их работы без переподписки

Будущее MLAG – возможность уйти от STP и перейти к топологии «звезда». Достоинство – не требуется поддержка на всем оборудовании VPLS – возможное движение в сторону full-mesh топологии. Требуется поддержка всем оборудованием. Достоинство – независимость от потери «любого» элемента сети. OPENFLOW (SDN) – переход к автономной системе централизованного управления. Активно развивается, но имеются ряд ограничений на версиях ниже 1.3

Дальнейшие улучшения Контроль за качеством работы клиентских подключений: CFM (Connectivity Fault Management) 802.3ag с помощью Ethernet OAM – проактивный мониторинг соединения, проверка на ошибки и изолирование ошибок на инфраструктуре. Требуется поддержка оборудованием по всей сети. BFD (Bidirectional Forwarding Detection) – RFC , быстрое определение нерабочего маршрута вне зависимости от таймеров протоколов (в нашем случае BGP Hello time). Существенно быстрое время сходимости. Требуется поддержка производителями оборудования и ПО Route Server. Cisco поддерживает BFD для BGP на основе 12.2SRE & 15.0M. Flowspec & Advanced Flowspec - RFC 5575, давно реализован и активно применяется в Juniper. Позволяет сигнализировать на удаленную сторону по BGP о возможных фильтрах. Эффективно для защиты от атак. Cisco планирует реализовать в 2014 на ASR9k/1k, Nexus 7k, возможно CRS, 6500/Sup2T, Пока стоит вопрос межвендорной совместимости.

Спасибо. Вопросы? Александр Ильин Технический директор MSK-IX