forked from mtusi2026/mtusi2026lab6
Перенесена реализация lab5 (API x2 за HAProxy, PostgreSQL, SeaweedFS S3, RabbitMQ, relay outbox, worker x2, janitor) без изменения бизнес-API. Наблюдаемость: - OpenTelemetry SDK в API, relay, worker, janitor: traces, metrics, logs по OTLP/HTTP; структурные JSON-логи с trace_id/span_id - OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus (метрики, alert rules), Loki (логи), Tempo (трассы), Grafana с provisioning datasources и dashboard - W3C trace context API -> outbox -> RabbitMQ -> worker (parent-child, включая retry); метрики очереди, пула БД, загрузки worker, CPU/RAM - SLI/SLO, 10 alert rules с unit-тестами promtool и runbooks - инциденты: остановка worker, блокировка БД, отказ telemetry backend; по наблюдениям исправлен простой worker в цикле AMQP (разбор x2.4)
13 lines
1.0 KiB
Bash
Executable File
13 lines
1.0 KiB
Bash
Executable File
#!/bin/sh
|
||
# Перезапуск ВСЕХ хранилищ — данных (PostgreSQL, SeaweedFS S3, RabbitMQ) и, с lab6, телеметрии
|
||
# (Prometheus, Loki, Tempo) — и всех процессов (API-реплики, relay, worker, janitor, LB,
|
||
# OTel Collector, Grafana) с сохранением volumes pgdata, s3data, brokerdata, promdata, lokidata,
|
||
# tempodata, grafanadata. Не выполняет down -v, не пересоздаёт БД/bucket/очереди и не повторяет seed.
|
||
set -eu
|
||
cd "$(dirname "$0")/.."
|
||
docker compose restart db s3 broker prometheus loki tempo
|
||
# Потребители стартуют, когда хранилища действительно готовы (healthcheck s3 проверяет запись,
|
||
# healthcheck broker — запущенный узел и объявленную очередь, prometheus — /-/ready).
|
||
docker compose up -d --no-deps --no-recreate --wait db s3 broker prometheus
|
||
docker compose restart otel-collector api relay worker janitor lb grafana
|