East-West Submarine Cable System

East-West Submarine Cable System (EWSCS) — региональный волоконно-оптический кабель длиной 950 километров, оператор Sacofa Sdn Bhd, малайзийская телекоммуникационная компания со штаб-квартирой в Кучинге (штат Саравак). Введён в эксплуатацию в 2004 году. Кабель связывает Мерсинг на восточном побережье Полуостровной Малайзии (штат Паханг) с Пенариком на восточном побережье Суматры в Индонезии, с промежуточными точками приземления в Кучинге и Теремпе.

По любой отдельной метрике — длине, возрасту, владельцу или международному значению — EWSCS не выделяется. Он короче, чем расстояние от Лондона до Лиссабона, старше большинства других кабелей в нашем мониторинге, принадлежит одному региональному оператору и приземляется в малых точках, а не в крупных хабах вроде Сингапура (Туас, Чанги) или Джакарты. Тем не менее данные измерений RIPE Atlas рассказывают историю, которая совсем не выглядит обыденной.

Цифры, которые не сходятся

Для волоконного кабеля длиной L теоретический минимум времени двустороннего сигнала («физический пол») равен примерно 2L / (0.667 × c), где 0.667 × c учитывает скорость света в стекле. Для 950 км этот пол составляет около 9.3 мс. Любое измерение быстрее этого значения подразумевало бы, что сигнал идёт сокращённым маршрутом — то есть либо длина кабеля указана неверно, либо трафик в действительности не идёт по самому кабелю.

За 208 семплов RIPE Atlas из семи различных точек запуска за последние 30 дней EWSCS выглядит так:

Закономерность достаточно странная, чтобы перечитать таблицу дважды. Когда мы измеряем с собственной точки приземления кабеля в Мерсинге, всего в 950 км от Пенарика, латентность скачет дикий разброс между 16 мс и 561 мс — 35-кратный размах. Когда мы измеряем из Иерусалима, почти за 8000 км через пять прыжков транс-азиатской инфраструктуры, RTT держится стабильно на уровне 227 мс со стандартным отклонением всего 0.21 мс.

Почему дальние пробы предсказуемее ближних

Это знакомый парадокс в сетевых измерениях, но EWSCS делает его особенно наглядным. Сам кабель — это 950 км стекла с фиксированной односторонней задержкой около 4.7 мс. После уплаты этой физической цены весь остаток RTT приходится на access-сети, решения о пиринге и глубину очередей на каждом промежуточном хопе.

Из Иерусалима путь до Пенарика доминируют дальнемагистральные транс-азиатские стволы (Европа→Египет→Индия→Сингапур→Индонезия, в каком-то приближении), каждый из которых сам по себе ограничен своим физическим полом. Путь длинный, но в основном проходит между крупными точками обмена трафиком, где очереди минимальны. Результат: дисперсия усредняется через что-то вроде центральной предельной теоремы на сетевом уровне.

Из Мерсинга, напротив, путь до Пенарика доминируют малайзийская и индонезийская инфраструктуры «последней мили» — сети, изначально спроектированные для домашнего и корпоративного трафика, с глубокими буферами и значительной перегрузкой в часы пик. Прыжок длиной 950 км касается большего относительного объёма «грязной» инфраструктуры, чем прыжок длиной 8000 км. Короткие пути видят неаккуратность вблизи; длинные — её сглаживают.

Асимметричная маршрутизация — одно волокно, разные обратные пути

35-кратный разброс на маршруте Мерсинг→Пенарик однозначно намекает на асимметричную маршрутизацию. Минимальный измеренный RTT в 15.76 мс — это всего лишь 1.7-кратное превышение физического пола, что близко к нему и указывает: ICMP-пакеты в прямом направлении, по всей видимости, идут именно через EWSCS, как и ожидалось. Но среднее значение, поднимающееся до 227 мс, и максимум в 560 мс говорят о том, что обратные пакеты из Пенарика идут совершенно другим маршрутом.

Одно правдоподобное объяснение: прямые пакеты из Мерсинга следуют коротким BGP-предпочтительным маршрутом через EWSCS, тогда как обратные пакеты из Пенарика иногда уходят через пиринг в Джакарте или Сингапуре, а оттуда возвращаются по альтернативным кабелям, прежде чем попасть в Мерсинг. Когда эти альтернативные пути не загружены, общий round-trip ratio выглядит ещё разумно; когда же случается пик нагрузки, RTT раздувается до 500+ мс. Сигнатура именно та, которую мы видим: очень низкий минимум (одно направление использует кабель) и очень высокий максимум (обратное направление идёт длинным обходом).

Что это говорит о региональных кабелях

EWSCS по своей конструкции является региональным активом — принадлежит Sacofa, заканчивается в малых прибрежных точках, а не в мега-IXах — и измерительная история, которую он рассказывает, тоже региональная. Большинство других кабелей в нашем досье несут транс-океанский трафик, где симметрия пути обеспечивается ограниченным числом жизнеспособных операторов. Региональные кабели вроде EWSCS живут в более плотной сетке, где альтернативные пути изобилуют, BGP-решения принимаются дёшево, а асимметрия — норма, а не исключение.

Минимальный RTT в 15.76 мс говорит нам о том, что само волокно здорово и прямая маршрутизация действительно использует его. Среднее значение в 227 мс говорит, что обратный путь идёт через что-то ещё, где-то ещё. Непрерывный мониторинг покажет, стабильна ли эта асимметрия (BGP выбирает один и тот же альтернативный путь постоянно) или колеблется (несколько путей выбираются в течение дня). Любое прочтение будет полезным.

EWSCS в региональной кабельной сетке

EWSCS — один из нескольких кабелей, эксплуатируемых Sacofa и связывающих Полуостровную Малайзию, Саравак и индонезийскую Суматру. Он сосуществует в региональной сетке с SEAX-1, B2JS, MCS и более короткими внутренними кабелями, которые обеспечивают резервные пути между точками приземления в районе Сингапура и более широким индонезийским архипелагом. Дата ввода в эксплуатацию 2004 относит EWSCS к пост-доткомовской кабельной эре — кабелям, построенным для выживания, а не для спекулятивного перепредложения конца 1990-х. Двадцать лет эксплуатации дали ему достаточно времени, чтобы интегрироваться в сложную сеть региональных операторов.

Что делает EWSCS интересным для измерительной работы, так это именно это: здоровый 950-километровый кабель с чётким сигналом физического пола в прямом направлении, встроенный в достаточно богатую инфраструктуру альтернативных маршрутов, чтобы порождать драматическую асимметрию во взгляде на round-trip. Это маленький кабель, который преподаёт большой урок о том, как подводное волокно ведёт себя, выйдя за пределы лаборатории.