Добавила всё необходимое для корректного выполнения теста resilience.py

This commit is contained in:
vasyukova
2026-10-08 20:51:24 +03:00
parent 8688f66fd5
commit 5da3ada550
5 changed files with 88 additions and 59 deletions
+1 -1
View File
@@ -69,7 +69,7 @@ services:
ports:
- "127.0.0.1:8080:80"
volumes:
- ./infra/nginx.conf:/etc/nginx/nginx.conf:ro
- ./infra/nginx.conf:/etc/nginx/conf.d/default.conf:ro
depends_on:
api:
condition: service_healthy
+3 -2
View File
@@ -1,12 +1,13 @@
#!/bin/sh
set -eu
# X-Instance-Id: если INSTANCE_ID не задан снаружи, генерируем уникальный
# для этого контейнера при старте. Так каждая реплика получает свой alias,
# даже если образ один и тот же.
# для этого контейнера при старте. Кладём его в файл /tmp/instance_id,
# чтобы stop-one.bat/.sh могли сопоставить alias и контейнер.
if [ -z "${INSTANCE_ID:-}" ]; then
INSTANCE_ID=$(python -c "import uuid; print(uuid.uuid4().hex[:12])")
export INSTANCE_ID
fi
echo "event=instance_id instance_id=${INSTANCE_ID}"
echo -n "${INSTANCE_ID}" > /tmp/instance_id
exec "$@"
+27 -32
View File
@@ -1,38 +1,33 @@
worker_processes auto;
events { worker_connections 1024; }
# vhost для nginx: монтируется в /etc/nginx/conf.d/default.conf.
http {
# access_log / error_log по умолчанию в stdout/stderr образа nginx.
upstream api_backend {
# max_fails=1 fail_timeout=5s: после первой ошибки реплика сразу
# исключается из ротации на 5 секунд. Иначе resilience-тест
# «too few successful writes after stop» будет падать.
server api:8080 max_fails=1 fail_timeout=5s;
}
upstream api_backend {
# Docker DNS отдаёт все IP реплик сервиса api.
server api:8080 max_fails=2 fail_timeout=5s;
keepalive 32;
server {
listen 80 default_server;
server_name _;
proxy_connect_timeout 1s;
proxy_send_timeout 10s;
proxy_read_timeout 10s;
location / {
proxy_pass http://api_backend;
proxy_http_version 1.1;
proxy_set_header Connection "";
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_next_upstream error timeout http_502 http_503 http_504;
proxy_next_upstream_tries 2;
}
server {
listen 80;
# Короткие таймауты, чтобы мёртвый backend быстро исключался.
proxy_connect_timeout 2s;
proxy_send_timeout 10s;
proxy_read_timeout 10s;
location / {
proxy_pass http://api_backend;
proxy_http_version 1.1;
proxy_set_header Connection "";
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_next_upstream error timeout http_502 http_503 http_504;
proxy_next_upstream_tries 2;
}
# readiness LB напрямую проверяет свой upstream через api (docker healthcheck).
location = /lb/health {
return 200 "ok\n";
add_header Content-Type text/plain;
}
location = /lb/health {
return 200 "ok\n";
add_header Content-Type text/plain;
}
}
+39
View File
@@ -0,0 +1,39 @@
@echo off
REM Windows-эквивалент scripts/stop-one.sh для lab3.
REM Останавливает именно ту реплику, чей X-Instance-Id == TARGET_INSTANCE_ID.
REM DB/LB/volumes не трогаем; восстановление — docker compose up -d api.
setlocal enabledelayedexpansion
if "%TARGET_INSTANCE_ID%"=="" (
echo TARGET_INSTANCE_ID not set >&2
exit /b 1
)
set TARGET_ID=
for /f "tokens=*" %%c in ('docker ps --filter "label=com.docker.compose.service=api" -q') do (
for /f "tokens=*" %%v in ('docker exec %%c cat /tmp/instance_id 2^>nul') do (
if "%%v"=="%TARGET_INSTANCE_ID%" (
set TARGET_ID=%%c
)
)
)
if "!TARGET_ID!"=="" (
echo no api replica with INSTANCE_ID=%TARGET_INSTANCE_ID% >&2
exit /b 1
)
echo Stopping api replica !TARGET_ID! (INSTANCE_ID=%TARGET_INSTANCE_ID%)
docker stop -t 3 !TARGET_ID! >nul
REM Ждём, пока контейнер реально уйдёт из Up (максимум ~5 секунд).
set /a i=0
:wait_loop
if %i% geq 50 exit /b 0
for /f "tokens=*" %%c in ('docker ps --filter "id=!TARGET_ID!" --format "{{.ID}}"') do (
timeout /t 1 /nobreak >nul
set /a i+=1
goto wait_loop
)
exit /b 0
+18 -24
View File
@@ -1,34 +1,28 @@
#!/bin/sh
set -eu
# Методичка:
# TARGET_INSTANCE_ID — alias обслужившей тест API-реплики (значение X-Instance-Id).
# Скрипт должен быстро вернуть 0 и ОСТАВИТЬ эту реплику остановленной.
# DB/LB/volumes не трогаем; восстанавливать будем отдельно (docker compose up -d api).
: "${TARGET_INSTANCE_ID:?test provides target API instance alias}"
# Находим контейнеры сервиса api и сопоставляем alias с env INSTANCE_ID.
# В compose реплики api не имеют container_name, поэтому ищем по label.
# INSTANCE_ID каждой реплики уникален? — нет: он задан общим ENV образа.
# Значит, alias недостаточно для сопоставления. Решение: Dockerfile генерирует
# INSTANCE_ID при СТАРТЕ контейнера, если он не задан извне. Проще всего:
# используем X-Instance-Id, который API пишет в логи/ответы; но чтобы связать
# его с конкретным контейнером, включим INSTANCE_ID в имя процесса через
# небольшой health-эндпоинт. Ещё проще — использовать container_name через
# отдельные сервисы api1/api2. Ниже — простой вариант: останавливаем первый
# попавшийся контейнер сервиса api, кроме того, что сейчас обслуживает тест.
TARGET=""
for c in $(docker ps --filter "label=com.docker.compose.service=api" -q); do
id=$(docker exec "$c" cat /tmp/instance_id 2>/dev/null || true)
if [ "$id" = "$TARGET_INSTANCE_ID" ]; then
TARGET="$c"
break
fi
done
# На практике достаточно остановить ЛЮБУЮ одну реплику: тест проверяет,
# что трафик переключился. Останавливаем первую в списке; если тест сам
# с ней работал — тоже допустимо, X-Instance-Id после остановки не должен
# появляться в ответах LB.
TARGET=$(docker compose --env-file .env ps -q api | head -n1)
if [ -z "$TARGET" ]; then
echo "no api replica found" >&2
echo "no api replica with INSTANCE_ID=$TARGET_INSTANCE_ID" >&2
exit 1
fi
# docker stop: оставляем контейнер остановленным; compose up -d api его поднимет.
docker stop -t 5 "$TARGET" >/dev/null
docker stop -t 3 "$TARGET" >/dev/null
i=0
while [ $i -lt 50 ]; do
if ! docker ps --filter "id=$TARGET" --format "{{.ID}}" | grep -q .; then
exit 0
fi
i=$((i+1)); sleep 0.1
done
exit 0