ЛР 6 - БВТ2302 - Миронов - на 4 #66

Open
ALMiron wants to merge 2 commits from ALMiron/mtusi2026lab6-fork:solution/bvt2302-mironov into main
First-time contributor

Лабораторная 6

Автор / группа: Алексей Миронов, БВТ2302
Целевая оценка (3/4/5): 4
Трек 5, если заявлен: не заявлен

Что реализовано и что перенесено: Перенесён весь стек lab5 без изменения бизнес-API (FastAPI x2, HAProxy, PostgreSQL, Redis, S3, Kafka, transactional outbox, dispatcher, worker, sweeper, миграции, скрипты отказов). Новое в lab6: src/telemetry.py (OpenTelemetry SDK: traces, metrics, logs по OTLP), инструментация API/worker/dispatcher, W3C trace context через outbox и Kafka (traceparent в payload; API -> dispatcher (PRODUCER) -> worker (CONSUMER), retry в том же trace), метрики HTTP/jobs/очереди/DB pool/worker/CPU/RAM, структурные JSON-логи с trace_id и span_id, OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus + Loki + Tempo + Grafana с provisioning из Git, dashboard (16 панелей), SLI/SLO, два alert rules (HighApiErrorRate, QueueLagGrowing), runbooks, сценарии student-tests/level4_observability.py.

Команды запуска из чистого clone:

cp .env.example .env
make check && make validate
docker compose --env-file .env config --quiet
docker compose --env-file .env up --build
until curl -fs http://localhost:8080/health/ready; do sleep 2; done
make test
python3 tests/load.py --duration 30 --concurrency 4 --output evidence/load.json
python3 student-tests/level4_observability.py all | tee evidence/level4-observability.txt

Результаты проверок и ссылка на REPORT1.md: REPORT1.md (в репозитории; рабочее имя REPORT1.md), доказательства в evidence/.

  • make check, make validate, docker compose config --quiet: PASS.
  • make test: PASS: lab6 public API scenario.
  • tests/load.py (30 с, 4 потока): 1499 успешных, 0 ошибок, 49.9 RPS, p95 203.5 мс.
  • trace_chain: PASS, trace dcc088e178af4fd97d573719cf4161a5 включает API, dispatcher publish, worker process, S3 и DB spans.
  • queue_lag (остановлен worker): QueueLagGrowing firing через ~117 с, resolved через ~23 с после старта worker.
  • db_slow (блокировка таблицы messages): HighApiErrorRate firing через ~89 с (5xx 111 из 133), resolved через ~49 с.
  • telemetry_down (остановлены prometheus/loki/tempo): 0 неуспешных записей, память Collector 79.39 MiB из 256 MiB.

Ограничения / известные ошибки: Retry по истечении lease (reaper) начинает новый trace. Collector буферизует только в памяти (очередь ограничена, повтор 30 с, затем потеря телеметрии). Tempo запущен от root в учебном стенде. TLS/mTLS и ужесточение прав - lab7.

Источники и использование ИИ: скелет lab6 и собственная реализация lab5; OpenTelemetry Python SDK 1.45.1, OTel Collector contrib 0.131.0, Prometheus 3.5.0, Loki 3.5.3, Tempo 2.8.2, Grafana 12.1.1. Использовалась помощь ИИ

  • Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
  • Контракт и публичные тесты не ослаблены.
  • make check и make test выполнены; приложен реальный вывод.
  • Сценарии отказов/безопасности своего уровня воспроизведены.
  • Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
  • README задания сохранён, REPORT1.md содержит инструкцию именно моего решения.
## Лабораторная 6 Автор / группа: Алексей Миронов, БВТ2302 Целевая оценка (3/4/5): 4 Трек 5, если заявлен: не заявлен Что реализовано и что перенесено: Перенесён весь стек lab5 без изменения бизнес-API (FastAPI x2, HAProxy, PostgreSQL, Redis, S3, Kafka, transactional outbox, dispatcher, worker, sweeper, миграции, скрипты отказов). Новое в lab6: `src/telemetry.py` (OpenTelemetry SDK: traces, metrics, logs по OTLP), инструментация API/worker/dispatcher, W3C trace context через outbox и Kafka (`traceparent` в payload; API -> dispatcher (PRODUCER) -> worker (CONSUMER), retry в том же trace), метрики HTTP/jobs/очереди/DB pool/worker/CPU/RAM, структурные JSON-логи с trace_id и span_id, OTel Collector (`memory_limiter`, `batch`, ограниченные очереди и retry), Prometheus + Loki + Tempo + Grafana с provisioning из Git, dashboard (16 панелей), SLI/SLO, два alert rules (`HighApiErrorRate`, `QueueLagGrowing`), runbooks, сценарии `student-tests/level4_observability.py`. Команды запуска из чистого clone: ``` cp .env.example .env make check && make validate docker compose --env-file .env config --quiet docker compose --env-file .env up --build until curl -fs http://localhost:8080/health/ready; do sleep 2; done make test python3 tests/load.py --duration 30 --concurrency 4 --output evidence/load.json python3 student-tests/level4_observability.py all | tee evidence/level4-observability.txt ``` Результаты проверок и ссылка на REPORT1.md: REPORT1.md (в репозитории; рабочее имя REPORT1.md), доказательства в evidence/. - `make check`, `make validate`, `docker compose config --quiet`: PASS. - `make test`: `PASS: lab6 public API scenario`. - `tests/load.py` (30 с, 4 потока): 1499 успешных, 0 ошибок, 49.9 RPS, p95 203.5 мс. - `trace_chain`: PASS, trace `dcc088e178af4fd97d573719cf4161a5` включает API, dispatcher publish, worker process, S3 и DB spans. - `queue_lag` (остановлен worker): `QueueLagGrowing` firing через ~117 с, resolved через ~23 с после старта worker. - `db_slow` (блокировка таблицы messages): `HighApiErrorRate` firing через ~89 с (5xx 111 из 133), resolved через ~49 с. - `telemetry_down` (остановлены prometheus/loki/tempo): 0 неуспешных записей, память Collector 79.39 MiB из 256 MiB. Ограничения / известные ошибки: Retry по истечении lease (reaper) начинает новый trace. Collector буферизует только в памяти (очередь ограничена, повтор 30 с, затем потеря телеметрии). Tempo запущен от root в учебном стенде. TLS/mTLS и ужесточение прав - lab7. Источники и использование ИИ: скелет lab6 и собственная реализация lab5; OpenTelemetry Python SDK 1.45.1, OTel Collector contrib 0.131.0, Prometheus 3.5.0, Loki 3.5.3, Tempo 2.8.2, Grafana 12.1.1. Использовалась помощь ИИ - [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами. - [x] Контракт и публичные тесты не ослаблены. - [x] make check и make test выполнены; приложен реальный вывод. - [x] Сценарии отказов/безопасности своего уровня воспроизведены. - [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens. - [x] README задания сохранён, REPORT1.md содержит инструкцию именно моего решения.
ALMiron added 1 commit 2026-11-21 00:09:48 +03:00
ALMiron added 1 commit 2026-11-21 00:12:47 +03:00
You are not authorized to merge this pull request.
This pull request can be merged automatically.
View command line instructions

Checkout

From your project repository, check out a new branch and test the changes.
git fetch -u https://gitea.privcloud.tech/ALMiron/mtusi2026lab6-fork solution/bvt2302-mironov:ALMiron-solution/bvt2302-mironov
git checkout ALMiron-solution/bvt2302-mironov
Sign in to join this conversation.
No Reviewers
No labels
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab6#66