Files
mtusi2026lab6/infra/otel

Сигналы lab6 (оценка 3)

API Go OTel SDK 1.38.0 (logs 0.14.0) и worker Python OTel SDK 1.38.0 отправляют HTTP/protobuf OTLP в otel-collector:4318. Collector 0.137.0: OTLP receiver → memory_limiter → batch → exporters. Prometheus опрашивает exporter 8889 каждые 5 секунд и хранит метрики. Loki принимает структурные логи через native OTLP, Tempo хранит трассы. Grafana запрашивает эти три хранилища. Persistent volumes сохраняют историю, retention 72 часа. Очереди и память ограничены; при долгом отказе возможны потери.

Dashboard: infra/grafana/dashboards/messenger.json, 8 панелей, автоматический provisioning. http://localhost:3000/d/messenger-lab6 — RPS, доля 5xx, API p95, jobs и worker p95, структурные логи и поиск реальных трасс. p95 вычисляется из суммы histogram buckets. HTTP health исключён из бизнес-панелей; error ratio = 5xx / все бизнес-запросы.

Метрики:

  • api_requests_total{method,route,status_class} — запросы;
  • api_duration_seconds_bucket — histogram в секундах;
  • worker_jobs_total{job_type,outcome} — попытки обработки;
  • worker_duration_seconds_bucket — длительность попытки в секундах.

Логи содержат timestamp/severity/service.name/event/trace_id/span_id, API добавляет request_id. Ответ содержит X-Trace-Id и X-Request-Id. Loki: {service_name="messenger-api"} | trace_id="ID", затем тот же ID в Tempo. Worker: {service_name="messenger-worker"} | event="job.success". API SERVER и worker CONSUMER spans окружают реальные операции. Контекст через очередь поддержан реализацией, но уровни 4/5 не заявлены. UUID/raw URL/request_id не используются как labels метрик; секреты, тела, картинки, headers, signed URLs и exception text не экспортируются.

Проверки: python3 student-tests/observability.py, python3 student-tests/incidents.py. Вторая временно останавливает worker и S3 своего Compose-проекта и восстанавливает их. SLO/alert rules и исследовательского эксперимента в варианте на 3 нет.