3.8 KiB
Лабораторная 6
Автор / группа: Маслов, БВТ2301. Целевая оценка: 5. Трек 2 — SLO и обнаружение инцидентов.
К собственному приложению ЛР5 добавлена наблюдаемость API, relay, worker, отдельного процесса обработки, PostgreSQL и S3: OpenTelemetry, постоянные Prometheus/Loki/Tempo, provisioning Grafana на18панелей и правила оповещений по нескольким временным окнам. Метки ограничены; текст сообщений, имена файлов и credentials не экспортируются.
Полный чистый clone прошёл smoke,112HTTP,26unit, cluster/failover/rolling/persistence, все19сценариев отказов pipeline, очистку с реальным возрастом S3, причинные traces/logs, privacy и сохранность observability после рестарта. В обоих COMMIT→ACK окнах pending подтверждён до SIGKILL; после восстановления второй публикации нет. У7контейнеров приложения сверены source hashes и OCI revision.
Исследование1823.238с: все6370подтверждённых сообщений и359файлов сохранены; краткие отказы не вызывали critical paging (warning API был), длительные инциденты обнаружены и сняты; во время90с отказа Loki/Tempo прошли360message writes, очередь Collector≤64 и RSS<384MiB. CSV, сводки и графики приложены. Условия и погрешность замеров описаны в REPORT.
Ограничения: один host и одиночные stateful сервисы; учебные30mокна; цель99% намеренно нарушена контролируемыми сбоями;4неплановых503 в конце исследования сохранены в raw данных. Возможна потеря telemetry при отказе backend. SLO опыт выполнен на0.5CPU/API, финальная регрессия — на2CPU/API; разные профили явно указаны. ЛР6 использует локальный HTTP, TLS/mTLS вынесен в ЛР7.
Запуск: uv sync --locked, make bootstrap, VCS_REF=$(git rev-parse HEAD) docker compose up -d --build --wait. API localhost8086, Grafana3006. Полные команды, результаты и ответы на4вопроса: REPORT.md. Финальная проверенная runtime-ревизия:231d965b1a10a26a845f66a9c148a5ce7ff07701.
Источники: собственная ЛР5, задание, официальная документация OTel/Grafana/Prometheus. Использована помощь ИИ при проектировании, реализации, проверках и подготовке отчёта; чужие студенческие решения не использовались.
- Обязательный минимум подтверждён полной регрессией из чистого клона.
- Контракт и публичные тесты не ослаблены.
- make check и make test выполнены; реальные receipts приложены.
- Отказы observability/SLO выбранного трека воспроизведены.
- Секреты и приватные ключи вне Git, значения не включены в отчёт.
- README задания сохранён; REPORT описывает именно это решение.