ЛР 6 - БПИ2303 - Любченко - на 4 #69

Open
lxstatmose wants to merge 1 commits from lxstatmose/mtusi2026lab6-fork:solution/bpi2303-lyubchenko into main
First-time contributor

Автор — Любченко Никита, БПИ2303.
Целевая оценка — 4.

Добавлена наблюдаемость мессенджера через OpenTelemetry. API, издатель и worker отправляют метрики, структурные логи и трассы в Collector. Prometheus хранит метрики, Loki — логи, Tempo — трассы. Источники данных и dashboard Grafana подключаются автоматически через provisioning.

W3C-контекст сохраняется вместе с заданием в PostgreSQL и передаётся через заголовки RabbitMQ. По одной загрузке изображения можно проследить HTTP-запрос, публикацию задания, обработку воркером и операции MinIO/PostgreSQL, включая повторную попытку. Логи связаны с трассами через trace_id и span_id.

Dashboard показывает RPS, долю ошибок, p50/p95/p99, глубину очереди, возраст старейшего задания, состояние пула БД, занятость worker и CPU/RAM процессов. Percentiles вычисляются из histogram buckets. Задан SLO — не менее 99% бизнес-запросов без 5xx за скользящие 5 минут. Добавлены алерты высокого error rate, queue lag и устаревшего наблюдения очереди.

SDK и Collector используют ограниченные очереди, batching, тайм-ауты и повторы экспорта. Хранилища сохраняют историю в persistent volumes. Пароли, токены, тела сообщений и изображения в телеметрию не передаются.

Проверки

  • make check, make validate, публичный smoke, observability smoke, persistence и failover — PASS.
  • Проверены сквозная трасса загрузки, передача traceparent/tracestate и связанные логи API, издателя и worker.
  • При остановке worker алерт сработал примерно через 30 секунд. После восстановления задание достигло ready, алерт снялся.
  • Блокировка PostgreSQL вызвала 503 и ошибку в DB span. Проверены состояния firing и resolved.
  • После временного отказа MinIO изображение обработано повторно. Обе попытки видны в одной трассе.
  • При отключении Tempo успешно записано 138 сообщений и обработано вложение. OOM и перезапусков приложений/Collector не было. Collector зарегистрировал потерю 248 spans, после восстановления свежие трассы снова доступны.
  • После перезапуска telemetry-хранилищ сохранились метрики, логи и исходная трасса.
  • Нагрузка за 30 секунд при concurrency 4 — 14 048 успешных запросов, 0 ошибок, около 468 RPS. Это один closed-loop прогон.
Автор — Любченко Никита, БПИ2303. Целевая оценка — 4. Добавлена наблюдаемость мессенджера через OpenTelemetry. API, издатель и worker отправляют метрики, структурные логи и трассы в Collector. Prometheus хранит метрики, Loki — логи, Tempo — трассы. Источники данных и dashboard Grafana подключаются автоматически через provisioning. W3C-контекст сохраняется вместе с заданием в PostgreSQL и передаётся через заголовки RabbitMQ. По одной загрузке изображения можно проследить HTTP-запрос, публикацию задания, обработку воркером и операции MinIO/PostgreSQL, включая повторную попытку. Логи связаны с трассами через trace_id и span_id. Dashboard показывает RPS, долю ошибок, p50/p95/p99, глубину очереди, возраст старейшего задания, состояние пула БД, занятость worker и CPU/RAM процессов. Percentiles вычисляются из histogram buckets. Задан SLO — не менее 99% бизнес-запросов без 5xx за скользящие 5 минут. Добавлены алерты высокого error rate, queue lag и устаревшего наблюдения очереди. SDK и Collector используют ограниченные очереди, batching, тайм-ауты и повторы экспорта. Хранилища сохраняют историю в persistent volumes. Пароли, токены, тела сообщений и изображения в телеметрию не передаются. Проверки - make check, make validate, публичный smoke, observability smoke, persistence и failover — PASS. - Проверены сквозная трасса загрузки, передача traceparent/tracestate и связанные логи API, издателя и worker. - При остановке worker алерт сработал примерно через 30 секунд. После восстановления задание достигло ready, алерт снялся. - Блокировка PostgreSQL вызвала 503 и ошибку в DB span. Проверены состояния firing и resolved. - После временного отказа MinIO изображение обработано повторно. Обе попытки видны в одной трассе. - При отключении Tempo успешно записано 138 сообщений и обработано вложение. OOM и перезапусков приложений/Collector не было. Collector зарегистрировал потерю 248 spans, после восстановления свежие трассы снова доступны. - После перезапуска telemetry-хранилищ сохранились метрики, логи и исходная трасса. - Нагрузка за 30 секунд при concurrency 4 — 14 048 успешных запросов, 0 ошибок, около 468 RPS. Это один closed-loop прогон.
lxstatmose added 1 commit 2026-11-21 11:35:11 +03:00
lxstatmose changed title from ЛР 6 - БПИ2303 - Любченко - на 5 to ЛР 6 - БПИ2303 - Любченко - на 4 2026-11-21 11:35:21 +03:00
You are not authorized to merge this pull request.
This pull request can be merged automatically.
View command line instructions

Checkout

From your project repository, check out a new branch and test the changes.
git fetch -u https://gitea.privcloud.tech/lxstatmose/mtusi2026lab6-fork solution/bpi2303-lyubchenko:lxstatmose-solution/bpi2303-lyubchenko
git checkout lxstatmose-solution/bpi2303-lyubchenko
Sign in to join this conversation.
No Reviewers
No labels
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab6#69