Исправила код по замечанию про rolling update

This commit is contained in:
vasyukova
2026-10-10 12:04:32 +03:00
parent 29a834c1d9
commit 2cbb569881
2 changed files with 62 additions and 1 deletions
+15 -1
View File
@@ -56,6 +56,12 @@ $env:PYTHONUTF8="1"
| `make test-persistence ACTION_SCRIPT=scripts/restart.sh` | `python tests/resilience.py --mode persistence --action-script scripts/restart.bat --base-url http://localhost:8080` |
| `make test-failover ACTION_SCRIPT=scripts/stop-one.sh` | `python tests/resilience.py --mode failover --action-script scripts/stop-one.bat --base-url http://localhost:8080` |
Проверка rolling update:
```
chmod +x scripts/rolling-update.sh
./scripts/rolling-update.sh
```
### Остановка и удаление учебных данных
```
@@ -142,6 +148,14 @@ mtuci2026lab3/
**Graceful shutdown.** SIGTERM: `main._handle_sigterm` выставляет `server.should_exit=True`; uvicorn закрывает слушающий сокет, текущие запросы дожидаются завершения.
**Rolling update.** `docker compose up -d --force-recreate api` останавливает
обе реплики одновременно: LB на секунды остаётся без бэкендов, и под
нагрузкой это даёт ~10% ошибок. Штатный способ — `scripts/rolling-update.sh`:
он собирает образ один раз, затем по очереди останавливает, удаляет и
поднимает по одной реплике, дожидаясь `GET /health/ready == 200` перед
следующим шагом. Проверка: параллельно с обновлением идёт `tests/load.py`,
ошибки переходного периода замеряются, но LB всё время имеет живого бэкенда.
**Ресурсные лимиты.** В `compose.yaml` у `api` — `deploy.resources.limits.cpus: "1.0"`, `memory: 512M`.
Соответствие `.env.example` реальной конфигурации (без изменений с lab2):
@@ -174,7 +188,7 @@ mtuci2026lab3/
| Последовательная остановка каждой реплики; RPS/ошибки/время восстановления | `python tests/resilience.py --mode failover …` для разных реплик (пользователь запускает дважды, восстанавливая предыдущую) | `successful_writes: 7`, `failed_attempts: 0`, `first_recovery_seconds: 5.189` |
| Общая идемпотентность проверена параллельными запросами | `test_idempotency_across_replicas` | `201 instances: {два разных alias}`, ровно 1 сообщение в истории |
| CPU/RAM-лимиты, API не публикуют порты наружу, нет container_name у масштабируемого сервиса | `compose.yaml` | `deploy.resources.limits` у api; `api` без `ports`; без `container_name` |
| Rolling update или эквивалентная поочерёдная замена под нагрузкой | `docker compose --env-file .env up -d --force-recreate api` (при поднятом LB) | LB продолжает обслуживать на живой реплике; новых пользователей не требуется |
| Rolling update или эквивалентная поочерёдная замена под нагрузкой | `scripts/rolling-update.sh` при поднятом LB и запущенном `python tests/load.py --duration 30 --concurrency 4` | Обновление идёт по одной реплике; замер: `X` ошибок из `Y` запросов (`Z%`); LB всегда имеет живого бэкенда |
### Выводы тестов
+47
View File
@@ -0,0 +1,47 @@
#!/bin/sh
# Поочерёдное обновление API-реплик под нагрузкой.
# Останавливаем и пересоздаём по одной реплике, дожидаясь /health/ready
# перед следующей — LB всегда имеет живого бэкенда.
set -eu
BASE_URL="${BASE_URL:-http://localhost:8080}"
ENV_FILE="${ENV_FILE:-.env}"
API_SERVICE="api"
REPLICAS=2
READY_TIMEOUT=60
wait_ready() {
i=0
while [ "$i" -lt "$READY_TIMEOUT" ]; do
if curl -fsS "$BASE_URL/health/ready" >/dev/null 2>&1; then
return 0
fi
i=$((i + 1))
sleep 1
done
echo "health/ready не поднялся за ${READY_TIMEOUT}s" >&2
return 1
}
# Собираем новый образ один раз, до остановки реплик.
docker compose --env-file "$ENV_FILE" build "$API_SERVICE"
i=1
while [ "$i" -le "$REPLICAS" ]; do
echo "event=rolling_update step=$i/$REPLICAS"
# Находим одну живую реплику и останавливаем её.
cid=$(docker ps --filter "label=com.docker.compose.service=$API_SERVICE" -q | head -n1)
if [ -n "$cid" ]; then
docker stop -t 10 "$cid" >/dev/null
docker rm "$cid" >/dev/null
fi
# Поднимаем обратно до нужного количества (новый образ уже собран).
docker compose --env-file "$ENV_FILE" up -d --no-deps --scale "$API_SERVICE=$REPLICAS" "$API_SERVICE" >/dev/null
wait_ready
i=$((i + 1))
done
echo "event=rolling_update_done"