15 — Диагностика и инциденты
Диагностика сервисов ITG
Типовые симптомы
- 502/504: проверить приложение, upstream и настройки прокси.
- 401/403: проверить авторизацию и права; не отключать защиту для устранения ошибки.
- 404: проверить маршрут и контекст приложения.
- 500: проверить логи и доступность зависимостей.
- Нет данных в мониторинге: проверить источник данных, запрос и временной диапазон, прежде чем объявлять сервис недоступным.
Последовательность
- Зафиксировать URL, время и текст ошибки.
- Проверить доступность сервиса из внутренней сети.
- Проверить статус контейнеров и последние ошибки.
- Проверить БД и очереди.
- Проверить Nginx Proxy Manager и TLS.
- Проверить Cloudflare и DNS.
- После исправления проверить бизнес-операцию, а не только HTTP-код.
Карточка инцидента
- Дата/время
- Сервис
- Симптом
- Масштаб влияния
- Первопричина
- Временное решение
- Постоянное исправление
- Проверка результата
- Действия для предотвращения повтора
Не записывать секреты, cookie и приватные данные в инцидентные отчёты.