Implement observable messenger, SLO alerts and measured incident scenarios

This commit is contained in:
2026-10-23 13:09:22 +03:00
parent 470d9d6f1e
commit b7540190c1
66 changed files with 96519 additions and 39 deletions
+8 -15
View File
@@ -1,18 +1,11 @@
## Лабораторная 6
## ЛР6 — БВТ2301 — Парамонов — на 5
Автор / группа: TODO
Целевая оценка (3/4/5): TODO
Трек 5, если заявлен: TODO
Парамонов Глеб, БВТ2301. Оценка5, трек2: SLO и обнаружение инцидентов.
Что реализовано и что перенесено: TODO
Команды запуска из чистого clone: TODO
Результаты проверок и ссылка на REPORT.md: TODO
Ограничения / известные ошибки: TODO
Источники и использование ИИ: TODO
Собственная база ЛР5 + явная OTel-инструментация API/dispatcher/worker, W3C context через durable job и broker, Collector, Prometheus/Loki/Tempo/Grafana. Provisioning17 panels, histogram percentiles, pool/queue/saturation, multi-window burn-rate alerts и runbook. Встроенная telemetry FastAPI отключена для исключения дублей и контроля редактирования полей.
- [ ] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
- [ ] Контракт и публичные тесты не ослаблены.
- [ ] make check и make test выполнены; приложен реальный вывод.
- [ ] Сценарии отказов/безопасности своего уровня воспроизведены.
- [ ] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
- [ ] README задания сохранён, REPORT.md содержит инструкцию именно моего решения.
Запуск: `python scripts/bootstrap.py`, `docker compose up -d --build --wait`; dev setup и команды в REPORT.md. Проверки: `scripts/verify_stack.py`, `scripts/verify_telemetry.py`, `scripts/incidents.py`. Доказательства и ограничения — REPORT.md и evidence/.
Первый полный прогон: бизнес/fault tests PASS; API burst5s без firing, sustained DB fault обнаружен55.049s; при остановке Loki/Tempo1517/1517 business writes. Collector queue не превысила32; потери telemetry явно учтены. Результаты окончательного чистого clone приложены в отчёте после проверки.
Источник истины бизнес-данных PG/S3 не зависит от telemetry; один учебный хост, короткие экспериментальные окна не заменяют production SLO. Исходные contracts/public tests не ослаблены. Секреты вне Git. Источники и использование OpenAI Codex раскрыты.