Автор / группа: Алексей Миронов, БВТ2302
Целевая оценка (3/4/5): 4
Трек 5, если заявлен: не заявлен
Что реализовано и что перенесено: Перенесён весь стек lab5 без изменения бизнес-API (FastAPI x2, HAProxy, PostgreSQL, Redis, S3, Kafka, transactional outbox, dispatcher, worker, sweeper, миграции, скрипты отказов). Новое в lab6: src/telemetry.py (OpenTelemetry SDK: traces, metrics, logs по OTLP), инструментация API/worker/dispatcher, W3C trace context через outbox и Kafka (traceparent в payload; API -> dispatcher (PRODUCER) -> worker (CONSUMER), retry в том же trace), метрики HTTP/jobs/очереди/DB pool/worker/CPU/RAM, структурные JSON-логи с trace_id и span_id, OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus + Loki + Tempo + Grafana с provisioning из Git, dashboard (16 панелей), SLI/SLO, два alert rules (HighApiErrorRate, QueueLagGrowing), runbooks, сценарии student-tests/level4_observability.py.
Команды запуска из чистого clone:
cp .env.example .env
make check && make validate
docker compose --env-file .env config --quiet
docker compose --env-file .env up --build
until curl -fs http://localhost:8080/health/ready; do sleep 2; done
make test
python3 tests/load.py --duration 30 --concurrency 4 --output evidence/load.json
python3 student-tests/level4_observability.py all | tee evidence/level4-observability.txt
Результаты проверок и ссылка на REPORT1.md: REPORT1.md (в репозитории; рабочее имя REPORT1.md), доказательства в evidence/.
make check, make validate, docker compose config --quiet: PASS.
trace_chain: PASS, trace dcc088e178af4fd97d573719cf4161a5 включает API, dispatcher publish, worker process, S3 и DB spans.
queue_lag (остановлен worker): QueueLagGrowing firing через ~117 с, resolved через ~23 с после старта worker.
db_slow (блокировка таблицы messages): HighApiErrorRate firing через ~89 с (5xx 111 из 133), resolved через ~49 с.
telemetry_down (остановлены prometheus/loki/tempo): 0 неуспешных записей, память Collector 79.39 MiB из 256 MiB.
Ограничения / известные ошибки: Retry по истечении lease (reaper) начинает новый trace. Collector буферизует только в памяти (очередь ограничена, повтор 30 с, затем потеря телеметрии). Tempo запущен от root в учебном стенде. TLS/mTLS и ужесточение прав - lab7.
Источники и использование ИИ: скелет lab6 и собственная реализация lab5; OpenTelemetry Python SDK 1.45.1, OTel Collector contrib 0.131.0, Prometheus 3.5.0, Loki 3.5.3, Tempo 2.8.2, Grafana 12.1.1. Использовалась помощь ИИ
Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
Контракт и публичные тесты не ослаблены.
make check и make test выполнены; приложен реальный вывод.
Сценарии отказов/безопасности своего уровня воспроизведены.
Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
README задания сохранён, REPORT1.md содержит инструкцию именно моего решения.
## Лабораторная 6
Автор / группа: Алексей Миронов, БВТ2302
Целевая оценка (3/4/5): 4
Трек 5, если заявлен: не заявлен
Что реализовано и что перенесено: Перенесён весь стек lab5 без изменения бизнес-API (FastAPI x2, HAProxy, PostgreSQL, Redis, S3, Kafka, transactional outbox, dispatcher, worker, sweeper, миграции, скрипты отказов). Новое в lab6: `src/telemetry.py` (OpenTelemetry SDK: traces, metrics, logs по OTLP), инструментация API/worker/dispatcher, W3C trace context через outbox и Kafka (`traceparent` в payload; API -> dispatcher (PRODUCER) -> worker (CONSUMER), retry в том же trace), метрики HTTP/jobs/очереди/DB pool/worker/CPU/RAM, структурные JSON-логи с trace_id и span_id, OTel Collector (`memory_limiter`, `batch`, ограниченные очереди и retry), Prometheus + Loki + Tempo + Grafana с provisioning из Git, dashboard (16 панелей), SLI/SLO, два alert rules (`HighApiErrorRate`, `QueueLagGrowing`), runbooks, сценарии `student-tests/level4_observability.py`.
Команды запуска из чистого clone:
```
cp .env.example .env
make check && make validate
docker compose --env-file .env config --quiet
docker compose --env-file .env up --build
until curl -fs http://localhost:8080/health/ready; do sleep 2; done
make test
python3 tests/load.py --duration 30 --concurrency 4 --output evidence/load.json
python3 student-tests/level4_observability.py all | tee evidence/level4-observability.txt
```
Результаты проверок и ссылка на REPORT1.md: REPORT1.md (в репозитории; рабочее имя REPORT1.md), доказательства в evidence/.
- `make check`, `make validate`, `docker compose config --quiet`: PASS.
- `make test`: `PASS: lab6 public API scenario`.
- `tests/load.py` (30 с, 4 потока): 1499 успешных, 0 ошибок, 49.9 RPS, p95 203.5 мс.
- `trace_chain`: PASS, trace `dcc088e178af4fd97d573719cf4161a5` включает API, dispatcher publish, worker process, S3 и DB spans.
- `queue_lag` (остановлен worker): `QueueLagGrowing` firing через ~117 с, resolved через ~23 с после старта worker.
- `db_slow` (блокировка таблицы messages): `HighApiErrorRate` firing через ~89 с (5xx 111 из 133), resolved через ~49 с.
- `telemetry_down` (остановлены prometheus/loki/tempo): 0 неуспешных записей, память Collector 79.39 MiB из 256 MiB.
Ограничения / известные ошибки: Retry по истечении lease (reaper) начинает новый trace. Collector буферизует только в памяти (очередь ограничена, повтор 30 с, затем потеря телеметрии). Tempo запущен от root в учебном стенде. TLS/mTLS и ужесточение прав - lab7.
Источники и использование ИИ: скелет lab6 и собственная реализация lab5; OpenTelemetry Python SDK 1.45.1, OTel Collector contrib 0.131.0, Prometheus 3.5.0, Loki 3.5.3, Tempo 2.8.2, Grafana 12.1.1. Использовалась помощь ИИ
- [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
- [x] Контракт и публичные тесты не ослаблены.
- [x] make check и make test выполнены; приложен реальный вывод.
- [x] Сценарии отказов/безопасности своего уровня воспроизведены.
- [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
- [x] README задания сохранён, REPORT1.md содержит инструкцию именно моего решения.
Blocking a user prevents them from interacting with repositories, such as opening or commenting on pull requests or issues. Learn more about blocking a user.
Лабораторная 6
Автор / группа: Алексей Миронов, БВТ2302
Целевая оценка (3/4/5): 4
Трек 5, если заявлен: не заявлен
Что реализовано и что перенесено: Перенесён весь стек lab5 без изменения бизнес-API (FastAPI x2, HAProxy, PostgreSQL, Redis, S3, Kafka, transactional outbox, dispatcher, worker, sweeper, миграции, скрипты отказов). Новое в lab6:
src/telemetry.py(OpenTelemetry SDK: traces, metrics, logs по OTLP), инструментация API/worker/dispatcher, W3C trace context через outbox и Kafka (traceparentв payload; API -> dispatcher (PRODUCER) -> worker (CONSUMER), retry в том же trace), метрики HTTP/jobs/очереди/DB pool/worker/CPU/RAM, структурные JSON-логи с trace_id и span_id, OTel Collector (memory_limiter,batch, ограниченные очереди и retry), Prometheus + Loki + Tempo + Grafana с provisioning из Git, dashboard (16 панелей), SLI/SLO, два alert rules (HighApiErrorRate,QueueLagGrowing), runbooks, сценарииstudent-tests/level4_observability.py.Команды запуска из чистого clone:
Результаты проверок и ссылка на REPORT1.md: REPORT1.md (в репозитории; рабочее имя REPORT1.md), доказательства в evidence/.
make check,make validate,docker compose config --quiet: PASS.make test:PASS: lab6 public API scenario.tests/load.py(30 с, 4 потока): 1499 успешных, 0 ошибок, 49.9 RPS, p95 203.5 мс.trace_chain: PASS, tracedcc088e178af4fd97d573719cf4161a5включает API, dispatcher publish, worker process, S3 и DB spans.queue_lag(остановлен worker):QueueLagGrowingfiring через ~117 с, resolved через ~23 с после старта worker.db_slow(блокировка таблицы messages):HighApiErrorRatefiring через ~89 с (5xx 111 из 133), resolved через ~49 с.telemetry_down(остановлены prometheus/loki/tempo): 0 неуспешных записей, память Collector 79.39 MiB из 256 MiB.Ограничения / известные ошибки: Retry по истечении lease (reaper) начинает новый trace. Collector буферизует только в памяти (очередь ограничена, повтор 30 с, затем потеря телеметрии). Tempo запущен от root в учебном стенде. TLS/mTLS и ужесточение прав - lab7.
Источники и использование ИИ: скелет lab6 и собственная реализация lab5; OpenTelemetry Python SDK 1.45.1, OTel Collector contrib 0.131.0, Prometheus 3.5.0, Loki 3.5.3, Tempo 2.8.2, Grafana 12.1.1. Использовалась помощь ИИ
View command line instructions
Checkout
From your project repository, check out a new branch and test the changes.