Статус сети

Оператор транзита проводил незапланированную замену линейной карты и не уведомил площадку. Трафик частично уходил в чёрную дыру: пакеты терялись у части клиентов, у остальных росла задержка. Переключили анонсы на второй аплинк вручную через 19 минут после первого срабатывания зонда. Что изменили: понизили порог автоматического переключения с 4 % потерь до 1,5 % и добавили независимый зонд в Софии.

Миграция базы биллинга затянулась дольше расчётного окна: блокировка таблицы платежей задержала запросы, пул соединений исчерпался. Виртуальные машины клиентов работали штатно, недоступны были только панель, API и выставление счетов. Что изменили: миграции с блокировками теперь идут в теневой таблице с последующим переключением, окно обслуживания вынесено на 03:00–05:00 UTC.

Профиль защиты принял всплеск легитимного трафика на одном адресе за SYN-флуд и увёл его в очистку с потерей части сессий. Затронут один клиент, компенсация начислена без запроса. Что изменили: для тарифов от NODE-6 порог по новым соединениям поднят с 8 000 до 20 000 в секунду.

Аппаратный отказ контроллера, массив RAID-10 ушёл в деградацию. 23 виртуальные машины были остановлены и подняты на резервной ноде из последнего снимка гипервизора; клиенты с включённым автобэкапом восстановились без потерь, остальные потеряли данные с момента последнего собственного снимка. Что изменили: держим горячий резерв контроллеров на каждой площадке, добавили ежечасный снимок метаданных на всех нодах.

Платёжный шлюз отдавал вебхуки с задержкой до десяти минут из-за перегрузки на своей стороне. Средства не терялись, серверы выдавались с опозданием. Что изменили: добавили опрос статуса счёта по расписанию как резервный механизм — теперь выдача не зависит только от вебхука.