NNorthwind
История

Публикуем всё, что заметили проверки, включая короткие деградации и плановые работы. Время московское. Разбор пишем для инцидентов дольше получаса и для всего, что задело данные.

2026-08-12
42 мин
деградация

Повышенная задержка API

11:18-12:00. Медиана ответа на /v1/products выросла до 1,9 с, часть клиентов завершала запросы по своему таймауту. Причина - план запроса, который после ночного роста таблицы остатков перестал попадать в индекс. Добавили индекс по паре контур-обновление, план вернулся, задержка упала до обычной за три минуты.

Разбор инцидента →
2026-07-29
2 ч 10 мин
деградация

Задержка доставки вебхуков

14:40-16:50. Очередь доставки росла: приёмник одного из контуров отвечал по 30 секунд, и его повторы занимали общие потоки. Медленные подписки вынесли в отдельный пул, очередь разобралась за 20 минут. Ни одно событие не потеряно, все доставлены с задержкой.

2026-07-08
1 ч 11 мин
деградация

Письма уходили с задержкой до часа

10:05-11:16. Внешний отправитель ограничил нам скорость после всплеска рассылки, и событийные письма встали в общую очередь. Развели событийные письма с массовыми по разным отправителям, очередь разошлась без потерь.

2026-06-10
40 мин
работы

Плановые работы: обновление панели

03:10-03:50. Выкатывали версию панели с миграцией настроек уведомлений. Панель была недоступна, API и вебхуки работали штатно. Объявляли за неделю.

2026-04-28
22 мин
сбой

Песочница не выдавала ключи

16:41-17:03. Создание ключей sk_test отвечало ошибкой: контур песочницы не получил обновлённую схему после ночной чистки. Рабочий контур затронут не был. Схему накатили руками, чистку и миграцию развели по времени.

Инциденты старше 12 месяцев из ленты убираются. Нужен разбор по конкретной дате - запросите его из кабинета, мы храним журналы 13 месяцев.