Горизонтальное масштабирование за LB с общими сессиями Redis, X-Instance-Id, обязательным Idempotency-Key в PostgreSQL, сценариями failover/persistence и измерением цены масштабирования при фиксированном CPU/RAM бюджете.
82 lines
3.0 KiB
Bash
Executable File
82 lines
3.0 KiB
Bash
Executable File
#!/bin/sh
|
||
# Трек 1 lab3: цена масштабирования при фиксированном суммарном CPU/RAM.
|
||
#
|
||
# Гипотеза: при фиксированном бюджете (2.0 CPU / 1024 MiB на все API) рост числа
|
||
# реплик 1→2 помогает за счёт параллелизма, а 2→4 упирается в PostgreSQL/пул/
|
||
# HAProxy и перестаёт давать прирост successful RPS.
|
||
#
|
||
# Методика: для N=1,2,4 выставляем API_CPUS=2.0/N и API_MEMORY=$((1024/N))M,
|
||
# поднимаем стенд, ждём стабильный ready, гоняем tests/load.py 30с concurrency=8.
|
||
# Затем серия с ростом ресурсов (N=2 при 0.5→1.0→1.5 CPU на реплику).
|
||
set -eu
|
||
ROOT=$(CDPATH= cd -- "$(dirname "$0")/.." && pwd)
|
||
cd "$ROOT"
|
||
|
||
OUT=evidence/track1
|
||
mkdir -p "$OUT"
|
||
python3 -m pip install -q -r requirements-dev.txt >/dev/null 2>&1 || true
|
||
|
||
run_one() {
|
||
n="$1"
|
||
cpus="$2"
|
||
mem="$3"
|
||
label="$4"
|
||
echo "=== track1 $label replicas=$n cpus_each=$cpus mem_each=$mem ==="
|
||
|
||
cp .env.example .env
|
||
tmp=$(mktemp)
|
||
sed -e "s/^API_REPLICAS=.*/API_REPLICAS=$n/" \
|
||
-e "s/^API_CPUS=.*/API_CPUS=$cpus/" \
|
||
-e "s/^API_MEMORY=.*/API_MEMORY=$mem/" \
|
||
-e "s/^DB_MAX_CONNS=.*/DB_MAX_CONNS=5/" \
|
||
.env > "$tmp"
|
||
mv "$tmp" .env
|
||
|
||
# Только compose down текущего проекта. НЕ docker rm -f по имени — это убивает
|
||
# параллельные прогоны и сам же стенд во время warmup.
|
||
docker compose --env-file .env down --remove-orphans >/dev/null 2>&1 || true
|
||
bash scripts/up.sh
|
||
|
||
# Стабильный ready: несколько успешных проб подряд.
|
||
ok=0
|
||
tries=0
|
||
while [ "$ok" -lt 10 ]; do
|
||
tries=$((tries+1))
|
||
if [ "$tries" -gt 120 ]; then
|
||
echo "warmup timeout for $label" >&2
|
||
docker compose --env-file .env ps >&2 || true
|
||
docker compose --env-file .env logs --tail 40 >&2 || true
|
||
exit 1
|
||
fi
|
||
if curl -fsS "http://127.0.0.1:8080/health/ready" >/dev/null 2>&1; then
|
||
ok=$((ok+1))
|
||
else
|
||
ok=0
|
||
fi
|
||
sleep 0.5
|
||
done
|
||
|
||
out="$OUT/${label}.json"
|
||
python3 tests/load.py --base-url http://127.0.0.1:8080 --duration 30 --concurrency 8 --output "$out"
|
||
docker stats --no-stream --format '{{.Name}} {{.CPUPerc}} {{.MemUsage}}' > "$OUT/${label}.stats.txt" || true
|
||
docker compose --env-file .env ps > "$OUT/${label}.ps.txt" || true
|
||
echo "saved $out"
|
||
}
|
||
|
||
# Фиксированный суммарный бюджет 2.0 CPU / 1024 MiB.
|
||
run_one 1 2.00 1024M fixed_budget_n1
|
||
run_one 2 1.00 512M fixed_budget_n2
|
||
run_one 4 0.50 256M fixed_budget_n4
|
||
|
||
# Рост ресурсов при N=2.
|
||
run_one 2 0.50 256M grow_n2_small
|
||
run_one 2 1.00 512M grow_n2_medium
|
||
run_one 2 1.50 768M grow_n2_large
|
||
|
||
python3 scripts/summarize_track1.py
|
||
|
||
# Вернуть учебный стенд по умолчанию.
|
||
cp .env.example .env
|
||
bash scripts/up.sh >/dev/null
|
||
echo "track1 done → $OUT; stand restored to API_REPLICAS=2"
|