Публикуем всё, что заметили проверки, включая короткие деградации и плановые работы. Время московское. Разбор пишем для инцидентов дольше получаса и для всего, что задело данные.
Повышенная задержка API
11:18-12:00. Медиана ответа на /v1/products выросла до 2,1 с, часть клиентов завершала запросы по своему таймауту. Причина - план запроса, который после ночного роста таблицы остатков перестал попадать в индекс. Добавили индекс по паре контур-обновление, план вернулся, задержка упала до обычной за три минуты.
Разбор инцидента →Недоступна загрузка файлов
09:12-09:30. Приём прайсов и изображений отвечал 503: на узле приёма кончилось место, потому что после смены пути временных файлов чистка убирала не тот каталог. Освободили место, поправили путь, добавили проверку свободного места в дежурные оповещения.
Ошибки в панели управления
18:02-18:27. После выката часть страниц панели отвечала ошибкой: миграция блокировала таблицу сессий дольше, чем ожидалось. Откатились через 6 минут после первого срабатывания, остальное время ушло на прогрев кешей. API и вебхуки затронуты не были.
Поиск по каталогу возвращал пустую выдачу
12:34-13:26. Перестроение индекса после ночной выгрузки завершилось с ошибкой, и поиск отвечал пустым списком вместо товаров. Карточки и прямые ссылки при этом работали. Подняли индекс из предыдущей сборки, добавили проверку целостности до переключения.
Фоновые выгрузки шли дольше обычного
07:50-08:05. Одна большая выгрузка заняла все потоки очереди, остальные задачи ждали своей. Ограничили долю потоков на один контур, очередь разошлась за четверть часа.
Инциденты старше 12 месяцев из ленты убираются. Нужен разбор по конкретной дате - запросите его из кабинета, мы храним журналы 13 месяцев.