Перенесена реализация lab5 (API x2 за HAProxy, PostgreSQL, SeaweedFS S3, RabbitMQ, relay outbox, worker x2, janitor) без изменения бизнес-API. Наблюдаемость: - OpenTelemetry SDK в API, relay, worker, janitor: traces, metrics, logs по OTLP/HTTP; структурные JSON-логи с trace_id/span_id - OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus (метрики, alert rules), Loki (логи), Tempo (трассы), Grafana с provisioning datasources и dashboard - W3C trace context API -> outbox -> RabbitMQ -> worker (parent-child, включая retry); метрики очереди, пула БД, загрузки worker, CPU/RAM - SLI/SLO, 10 alert rules с unit-тестами promtool и runbooks - инциденты: остановка worker, блокировка БД, отказ telemetry backend; по наблюдениям исправлен простой worker в цикле AMQP (разбор x2.4)
19 lines
2.8 KiB
Markdown
19 lines
2.8 KiB
Markdown
## Лабораторная 6
|
||
|
||
Автор / группа: Лазарев Юрий Сергеевич, БПИ2303
|
||
Целевая оценка (3/4/5): 4
|
||
Трек 5, если заявлен: не заявлен
|
||
|
||
Что реализовано и что перенесено: перенесена реализация lab5 (API ×2 за HAProxy, PostgreSQL, SeaweedFS S3, RabbitMQ, relay outbox, worker ×2, janitor) без изменения бизнес-API. Добавлены OpenTelemetry SDK в API/relay/worker/janitor (traces, metrics, logs по OTLP/HTTP), отдельный OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus (метрики, alert rules), Loki (логи), Tempo (трассы), Grafana с provisioning datasources и dashboard; W3C trace context API → outbox → RabbitMQ → worker (parent-child, включая retry); SLI/SLO, 10 alert rules с unit-тестами и runbooks; разбор двух инцидентов и отказа telemetry backend.
|
||
Команды запуска из чистого clone: `./scripts/init-secrets.sh && ./scripts/check_rules.sh && docker compose --env-file .env up -d --build --wait && make check test` — подробно в REPORT.md «Запуск из чистого clone».
|
||
Результаты проверок и ссылка на REPORT.md: REPORT.md «Доказательства критериев»; stdout всех проверок — evidence/*.txt, агрегаты — evidence/*.json (полный прогон `LAB6_ONLY=1 ./student-tests/run_all.sh`).
|
||
Ограничения / известные ошибки: REPORT.md «Ограничения и следующие шаги» (один Docker-host; нет дисковой очереди Collector — потери телеметрии ограничены и считаются; Prometheus — единственная точка вычисления alerts).
|
||
Источники и использование ИИ: REPORT.md, шапка; код подготовлен с помощью ИИ-ассистента (Claude), запуск и проверки — автор.
|
||
|
||
- [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
|
||
- [x] Контракт и публичные тесты не ослаблены.
|
||
- [x] make check и make test выполнены; приложен реальный вывод.
|
||
- [x] Сценарии отказов/безопасности своего уровня воспроизведены.
|
||
- [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
|
||
- [x] README задания сохранён, REPORT.md содержит инструкцию именно моего решения.
|