Files

6.6 KiB
Raw Permalink Blame History

Сводка проверок

Шаг Что проверяет Результат Время, с Файл
check offline contract check (make check) PASS 0 evidence/check.txt
stack stand layout: replicas, ports, limits, networks, secrets PASS 2 evidence/stack.txt
smoke public smoke via the balancer (make test) PASS 0 evidence/smoke.txt
balancing balancing, shared sessions and data, X-Instance-Id PASS 1 evidence/balancing.txt
idempotency Idempotency-Key, parallel same key via replicas PASS 2 evidence/idempotency.txt
student-tests lab1/lab2 API tests via the balancer PASS 2 evidence/student-tests.txt
race lab2 races via the balancer PASS 1 evidence/race.txt
db PostgreSQL: rollback, FK, Argon2id, unique keys, migrations PASS 10 evidence/db.txt
redis Redis as the session store PASS 2 evidence/redis.txt
explain EXPLAIN of the history page (full plans: explain-history.txt) PASS 1 evidence/explain.txt
failover public failover test for every replica (make test-failover) PASS 38 evidence/failover.txt
failover-metrics stop/kill every replica under load, metrics PASS 70 evidence/failover-metrics.txt
load public load generator, 30 s, concurrency 4 PASS 30 evidence/load.txt
expiry session TTL=2 s, then normal TTL PASS 17 evidence/expiry.txt
failures Redis and PostgreSQL outages via the balancer PASS 47 evidence/failures.txt
persistence public persistence test + proof of real restarts (make test-persistence) PASS 9 evidence/persistence.txt
rolling-update rolling update under load PASS 28 evidence/rolling-update.txt

Замеры

Машина: Windows 10, AMD64 Family 26 Model 68 Stepping 0, AuthenticAMD; Docker VM: 16 CPU, 15.2 GiB RAM; клиент Python 3.11.1; дата прогона 2026-10-14, commit 0ab3a34 + uncommitted changes. Лимиты контейнеров: api 1 CPU / 512 MiB каждая, postgres 1 CPU / 512 MiB, redis и lb по 0,5 CPU / 128 MiB.

Публичный тест отказа (make test-failover, 15 с записи во время остановки реплики):

Прогон Остановлена реплика Реплик до отказа Успешных записей Неудачных попыток (повторены с тем же ключом) Первая запись после hook, с
1 58542a53644c 2 128 0 4.203
2 9737b915ff2f 2 132 0 4.281

Остановка каждой реплики под нагрузкой (student-tests/failover_metrics.py: 4 потока записи без пауз + 1 поток чтения, timeout клиента 2 с, 3 с до и 10 с после отказа):

Реплика Как остановлена Команда, с HAProxy вывел из балансировки через, с Ошибок (коды) Ошибки прекратились через, с Записей/с до Записей/с после p95 после, мс Вернулась в балансировку после docker start, с
58542a53644c docker stop (SIGTERM) 4.12 1.11 0 (-) 0.0 304.7 202.2 47.0 3.25
58542a53644c docker kill (SIGKILL) 0.81 0.11 2 (502: 2) 0.05 328.7 228.2 32.0 1.55
9737b915ff2f docker stop (SIGTERM) 4.12 1.5 0 (-) 0.0 288.7 232.7 32.0 4.09
9737b915ff2f docker kill (SIGKILL) 0.83 0.11 2 (502: 2) 0.05 266.7 219.9 32.0 4.14

Во всех прогонах: потерянных подтверждённых сообщений 0, дублей 0, остановленная реплика после остановки не ответила ни разу.

Rolling update (student-tests/rolling_update.py): версия rolling-20261014-201405 -> rolling-20261014-202804, 2 реплики заменены по одной за 13.48 с под той же нагрузкой. Записей/с до: 284.7, во время замены: 346.3; ошибок: 0 (-); p95 31.0 мс, максимум 78.0 мс; подтверждено 6527 сообщений, потерь и дублей нет.

Публичный генератор нагрузки (tests/load.py, closed loop, concurrency 4, 30 с, 2 реплики): 308.848 успешных POST/с, ошибок 0 (доля 0.0), задержка успешных p50 15.0 мс, p95 32.0 мс, p99 46.0 мс.

Воздействие Что ожидаем Что наблюдали Время восстановления / потеря данных
docker stop реплики (SIGTERM) под нагрузкой ошибок нет: реплика сначала уходит из балансировки (readiness 503), потом закрывает приём ошибок: 0, 0 (по репликам); HAProxy вывел реплику через 1.11, 1.5 с ошибки прекратились через 0.0 с; потерь 0, дублей 0; реплика вернулась через 4.09 с после docker start
docker kill реплики (SIGKILL, авария) под нагрузкой единицы 502 на запросы, начатые на убитой реплике; клиент повторяет их с тем же ключом ошибок: 2, 2 (по репликам); HAProxy вывел реплику через 0.11, 0.11 с ошибки прекратились через 0.05 с; потерь 0, дублей 0; реплика вернулась через 4.14 с после docker start
публичный make test-failover для каждой реплики запись продолжается не позже 10 с, подтверждённые сообщения на месте, дублей нет PASS 2 раз(а), неудачных попыток: 0, 0 первая запись после hook через 4.203, 4.281 с (hook ждёт остановки ~4 с); потерь нет
rolling update под нагрузкой ошибок нет, реплик всё время не меньше 2 ошибок: 0, замена заняла 13.48 с потерь 0, дублей 0
перезапуск всего стенда (restart hook: postgres, redis, api, lb) данные и прежний токен живы PASS, те же контейнеры с новым временем старта 8.5 с до готовности; потерь нет