Сигналы lab6 (оценка 3)
API Go OTel SDK 1.38.0 (logs 0.14.0) и worker Python OTel SDK 1.38.0
отправляют HTTP/protobuf OTLP в otel-collector:4318.
Collector 0.137.0: OTLP receiver → memory_limiter → batch → exporters.
Prometheus опрашивает exporter 8889 каждые 5 секунд и хранит метрики.
Loki принимает структурные логи через native OTLP, Tempo хранит трассы.
Grafana запрашивает эти три хранилища. Persistent volumes сохраняют историю,
retention 72 часа. Очереди и память ограничены; при долгом отказе возможны потери.
Dashboard: infra/grafana/dashboards/messenger.json, 8 панелей, автоматический provisioning.
http://localhost:3000/d/messenger-lab6 — RPS, доля 5xx, API p95, jobs и worker p95,
структурные логи и поиск реальных трасс. p95 вычисляется из суммы histogram buckets.
HTTP health исключён из бизнес-панелей; error ratio = 5xx / все бизнес-запросы.
Метрики:
api_requests_total{method,route,status_class}— запросы;api_duration_seconds_bucket— histogram в секундах;worker_jobs_total{job_type,outcome}— попытки обработки;worker_duration_seconds_bucket— длительность попытки в секундах.
Логи содержат timestamp/severity/service.name/event/trace_id/span_id,
API добавляет request_id. Ответ содержит X-Trace-Id и X-Request-Id.
Loki: {service_name="messenger-api"} | trace_id="ID", затем тот же ID в Tempo.
Worker: {service_name="messenger-worker"} | event="job.success".
API SERVER и worker CONSUMER spans окружают реальные операции.
Контекст через очередь поддержан реализацией, но уровни 4/5 не заявлены.
UUID/raw URL/request_id не используются как labels метрик; секреты, тела,
картинки, headers, signed URLs и exception text не экспортируются.
Проверки: python3 student-tests/observability.py, python3 student-tests/incidents.py.
Вторая временно останавливает worker и S3 своего Compose-проекта и восстанавливает их.
SLO/alert rules и исследовательского эксперимента в варианте на 3 нет.