Skeleton contracts / contracts (pull_request) Canceled after 0s
Co-authored-by: Copilot <223556219+Copilot@users.noreply.github.com>
48 lines
2.0 KiB
Bash
48 lines
2.0 KiB
Bash
#!/bin/bash
|
|
# Поочерёдная остановка каждой API-реплики под нагрузкой (уровень «4»).
|
|
# RPS, ошибки и p50/p95/p99 даёт tests/load.py (POST сообщений через nginx),
|
|
# время восстановления — от запуска реплики до её возвращения в балансировку nginx.
|
|
# Время переключения LB на живую реплику измеряет make test-failover (first_recovery_seconds).
|
|
|
|
set -euo pipefail
|
|
|
|
cd "$(dirname "$0")/.."
|
|
BASE_URL="${BASE_URL:-http://localhost:8080}"
|
|
DURATION="${DURATION:-40}"
|
|
OUTPUT_DIR="${OUTPUT_DIR:-evidence/failover}"
|
|
mkdir -p "$OUTPUT_DIR"
|
|
|
|
# healthy ещё не значит «в балансировке»: nginx держит упавшую реплику выключенной fail_timeout=10s.
|
|
in_rotation() {
|
|
local id; id=$(docker compose ps -q "$1" | cut -c1-12)
|
|
for _ in $(seq 60); do
|
|
curl -s -D - -o /dev/null "$BASE_URL/health/live" | grep -qi "x-instance-id: $id" && return 0
|
|
sleep 0.5
|
|
done
|
|
echo "$1 не вернулась в балансировку за 30 s" >&2; return 1
|
|
}
|
|
|
|
for svc in api-1 api-2; do
|
|
result="$OUTPUT_DIR/${svc}_$(date +%Y%m%d_%H%M%S).json"
|
|
echo "=== Остановка $svc под нагрузкой (${DURATION}s, 4 потока POST сообщений) ==="
|
|
|
|
python3 tests/load.py --base-url "$BASE_URL" --duration "$DURATION" --concurrency 4 --output "$result" >/dev/null &
|
|
load_pid=$!
|
|
sleep 5
|
|
|
|
docker compose stop "$svc"
|
|
echo "$svc остановлена, запросы обслуживает другая реплика"
|
|
sleep 10
|
|
|
|
start=$SECONDS
|
|
docker compose up -d --no-deps --wait "$svc"
|
|
in_rotation "$svc"
|
|
echo "Время восстановления $svc (запуск → снова в балансировке): $((SECONDS - start)) s"
|
|
|
|
wait "$load_pid" || echo "load.py завершился с ошибкой"
|
|
cat "$result"
|
|
echo
|
|
done
|
|
|
|
echo "Результаты в: $OUTPUT_DIR"
|