forked from mtusi2026/mtusi2026lab6
- api и worker отдают traces, metrics и logs по OTLP в Collector (memory_limiter, redaction, batch, ограниченная очередь и retry); хранилища: Prometheus (OTLP receiver), Loki, Tempo; Grafana с provisioning datasources и dashboard «Messenger lab6» - W3C trace context через outbox и RabbitMQ: producer/consumer spans связывают upload, публикации и попытки worker в одном trace - SLO доступности API (SLI на HAProxy) и времени до ready, multiwindow burn-rate alerts, ApiHighErrorRate, JobQueueLagGrowing, DbPoolSaturated, TelemetryExportFailing; unit-тесты promtool, runbooks - кампания трека 2 (k6, 6 отказов по расписанию), разбор и графики; проверки сигналов и истории telemetry, evidence и REPORT.md
13 lines
988 B
Bash
Executable File
13 lines
988 B
Bash
Executable File
#!/bin/sh
|
||
# Перезапускает LB, все API-реплики, worker, reconciler, PostgreSQL, RabbitMQ и SeaweedFS (хранилище + S3-шлюз),
|
||
# а также Collector и хранилища telemetry (Prometheus, Loki, Tempo) и Grafana (lab6).
|
||
# Все volumes сохраняются: pgdata, s3data, rabbitmq-data, prometheus-data, loki-data, tempo-data, grafana-data;
|
||
# migrate и s3-init ничего не меняют. Telemetry не теряется: приложение остановлено раньше хранилищ.
|
||
set -eu
|
||
cd "$(dirname "$0")/.."
|
||
docker compose stop lb api worker reconciler # штатный SIGTERM, реплики сначала завершают запросы и сбрасывают telemetry
|
||
docker compose stop s3
|
||
docker compose restart postgres seaweedfs rabbitmq otel-collector prometheus loki tempo grafana # те же контейнеры и volumes
|
||
docker compose start s3
|
||
docker compose start api worker reconciler lb
|