Сбой маршрутизации Teraswitch едва не остановил финализацию в Solana: вне сети оказалось 28,83% стейка

Сеть Solana в четверг приблизилась к порогу остановки финализации: из-за сбоя маршрутизации у Teraswitch временно отключились валидаторы, представлявшие 28,83% застейканных SOL. По оценке Marinade Finance, до критического уровня оставалось 4,51 процентного пункта. Инцидент затронул около 90 валидаторов в Европе и Азии. Совокупно более 133 млн SOL на время оказались вне сети. Внутри AS20326 одновременно отключилось 94% стейка. Восстановление трафика было зафиксировано в 04:16:15 UTC, сообщила Marinade. По данным Marinade, первопричина заключалась в том, что Teraswitch анонсировал default-route со своей площадки в Майами без атрибутов маршрута. Затем route reflector в Амстердаме распространил этот маршрут на площадки в Европе и Азии. Пограничные маршрутизаторы восприняли его как локальный и предпочли корректному default-route. При этом ядро сети Teraswitch отклонило маршрут как недействительный, из-за чего 12 площадок остались без рабочего пути. Среди затронутых локаций названы Лондон, Амстердам, Дублин, Франкфурт, Сингапур и Токио. Североамериканские площадки, по словам Marinade, с аналогичной проблемой не столкнулись. Teraswitch обнаружил сбой в течение 10 минут. Трафик восстановился в 04:16:15 UTC, при этом Майами оставался отключенным от магистрали на время дополнительных проверок. Marinade оценила объем стейка в AS20326 в 118,89 млн SOL, что соответствует 27,34% стейка сети; около 94% этого объема уходило офлайн во время инцидента. Дополнительно 14,1 млн SOL отключились через Latitude.sh, Limestone, Butterfly Research и Allnodes. Marinade не смогла подтвердить, была ли у этих отключений общая зависимость. Пятьдесят девять валидаторов, контролирующих 80,2 млн SOL, вернулись в сеть в тот же узкий интервал восстановления. По данным Marinade, валидаторы не переключались на резервные каналы до момента восстановления маршрутизации. Helius, второй по величине валидатор Solana, оставался вне сети все 33 минуты. Из 74 валидаторов, по которым Marinade собрала метрики, Laine, Cogent Crypto, SOL Strategies и Lion3d восстановились без осложнений. Общий недополученный доход пострадавших валидаторов Marinade оценила примерно в 333 SOL; компенсация будет покрыта за счет валидаторских бондов по итогам эпохи. На фоне инцидента Marinade намерена пересмотреть риски концентрации по ASN и дата-центрам: по ее данным, четыре ASN держат две трети распределенного ею стейка, а на AS395201 приходится 36,94%. Также Marinade планирует опубликовать сведения о том, используют ли валидаторы hotswap и системы автоматического failover.