15 — Диагностика и инциденты

Диагностика сервисов ITG

Типовые симптомы

• 502/504: проверить приложение, upstream и настройки прокси.
• 401/403: проверить авторизацию и права; не отключать защиту для устранения ошибки.
• 404: проверить маршрут и контекст приложения.
• 500: проверить логи и доступность зависимостей.
• Нет данных в мониторинге: проверить источник данных, запрос и временной диапазон, прежде чем объявлять сервис недоступным.

Последовательность

1. Зафиксировать URL, время и текст ошибки.
2. Проверить доступность сервиса из внутренней сети.
3. Проверить статус контейнеров и последние ошибки.
4. Проверить БД и очереди.
5. Проверить Nginx Proxy Manager и TLS.
6. Проверить Cloudflare и DNS.
7. После исправления проверить бизнес-операцию, а не только HTTP-код.

Карточка инцидента

• Дата/время
• Сервис
• Симптом
• Масштаб влияния
• Первопричина
• Временное решение
• Постоянное исправление
• Проверка результата
• Действия для предотвращения повтора

Не записывать секреты, cookie и приватные данные в инцидентные отчёты.