75 lines
2.5 KiB
Bash
75 lines
2.5 KiB
Bash
#!/bin/sh
|
|
set -eu
|
|
cd "$(dirname "$0")/.."
|
|
|
|
# Останавливает одну реплику API под нагрузкой k6.
|
|
#
|
|
# Имена контейнеров (api-1, api-3, api-5...) меняются после каждого rolling
|
|
# update, поэтому принимаем не имя, а индекс: 1 = первая живая, 2 = вторая.
|
|
#
|
|
# scripts/failover-under-load.sh <1|2> <output-prefix>
|
|
|
|
TARGET_INDEX="${1:?usage: $0 <1|2> <output-prefix>}"
|
|
PREFIX="${2:?usage: $0 <1|2> <output-prefix>}"
|
|
|
|
case "$TARGET_INDEX" in
|
|
1|2) ;;
|
|
*) echo "target index must be 1 or 2" >&2; exit 2 ;;
|
|
esac
|
|
|
|
# Находим нужную живую реплику по индексу.
|
|
CONTAINER=$(docker compose ps --format '{{.Name}}' api | sort | sed -n "${TARGET_INDEX}p")
|
|
[ -z "$CONTAINER" ] && { echo "нет реплики с индексом $TARGET_INDEX" >&2; exit 1; }
|
|
|
|
RATE="${RATE:-30}"
|
|
DURATION="${DURATION:-60s}"
|
|
|
|
echo ">>> цель: $CONTAINER"
|
|
echo ">>> k6: RATE=$RATE DURATION=$DURATION"
|
|
|
|
k6 run -e RATE="$RATE" -e DURATION="$DURATION" \
|
|
--summary-export "${PREFIX}-k6.json" \
|
|
student-tests/load-k6.js &
|
|
K6_PID=$!
|
|
|
|
# k6 прогревается: setup-логин, создание чата, первые секунды нагрузки
|
|
sleep 15
|
|
|
|
CID=$(docker inspect --format '{{.Id}}' "$CONTAINER")
|
|
echo ">>> останавливаем $CONTAINER ($CID)"
|
|
|
|
docker events --filter "container=$CID" \
|
|
--format '{{.Time}} {{.Action}}' > "${PREFIX}-events.log" &
|
|
EVENTS_PID=$!
|
|
|
|
START=$(date +%s.%N)
|
|
docker stop "$CONTAINER" >/dev/null
|
|
|
|
# Даём LB переключиться и второй реплике принять весь трафик.
|
|
# k6 продолжает слать запросы всё это время.
|
|
sleep 5
|
|
|
|
END=$(date +%s.%N)
|
|
kill "$EVENTS_PID" 2>/dev/null || true
|
|
wait "$EVENTS_PID" 2>/dev/null || true
|
|
|
|
{
|
|
echo "# Failover under k6 load"
|
|
echo "# target: $CONTAINER"
|
|
echo "# rate: $RATE"
|
|
echo "# duration: $DURATION"
|
|
echo "# wall-clock stop-recover: $(python -c "print(round($END - $START, 2))") s"
|
|
} > "${PREFIX}-timing.txt"
|
|
|
|
# Ждём k6 до конца — нагрузка продолжается на единственной оставшейся реплике
|
|
wait "$K6_PID" || true
|
|
|
|
echo ">>> восстанавливаем масштаб до 2"
|
|
docker compose up -d --scale api=2 >/dev/null
|
|
sleep 10
|
|
docker compose ps --format 'table {{.Name}}\t{{.Status}}' api
|
|
|
|
echo ">>> готово:"
|
|
echo " ${PREFIX}-k6.json"
|
|
echo " ${PREFIX}-timing.txt"
|
|
echo " ${PREFIX}-events.log" |