6.6 KiB
Сводка проверок
| Шаг | Что проверяет | Результат | Время, с | Файл |
|---|---|---|---|---|
| check | offline contract check (make check) | PASS | 0 | evidence/check.txt |
| stack | stand layout: replicas, ports, limits, networks, secrets | PASS | 2 | evidence/stack.txt |
| smoke | public smoke via the balancer (make test) | PASS | 0 | evidence/smoke.txt |
| balancing | balancing, shared sessions and data, X-Instance-Id | PASS | 1 | evidence/balancing.txt |
| idempotency | Idempotency-Key, parallel same key via replicas | PASS | 2 | evidence/idempotency.txt |
| student-tests | lab1/lab2 API tests via the balancer | PASS | 2 | evidence/student-tests.txt |
| race | lab2 races via the balancer | PASS | 1 | evidence/race.txt |
| db | PostgreSQL: rollback, FK, Argon2id, unique keys, migrations | PASS | 10 | evidence/db.txt |
| redis | Redis as the session store | PASS | 2 | evidence/redis.txt |
| explain | EXPLAIN of the history page (full plans: explain-history.txt) | PASS | 1 | evidence/explain.txt |
| failover | public failover test for every replica (make test-failover) | PASS | 38 | evidence/failover.txt |
| failover-metrics | stop/kill every replica under load, metrics | PASS | 70 | evidence/failover-metrics.txt |
| load | public load generator, 30 s, concurrency 4 | PASS | 30 | evidence/load.txt |
| expiry | session TTL=2 s, then normal TTL | PASS | 17 | evidence/expiry.txt |
| failures | Redis and PostgreSQL outages via the balancer | PASS | 47 | evidence/failures.txt |
| persistence | public persistence test + proof of real restarts (make test-persistence) | PASS | 9 | evidence/persistence.txt |
| rolling-update | rolling update under load | PASS | 28 | evidence/rolling-update.txt |
Замеры
Машина: Windows 10, AMD64 Family 26 Model 68 Stepping 0, AuthenticAMD; Docker VM: 16 CPU, 15.2 GiB RAM; клиент Python 3.11.1; дата прогона 2026-10-14, commit 0ab3a34 + uncommitted changes. Лимиты контейнеров: api 1 CPU / 512 MiB каждая, postgres 1 CPU / 512 MiB, redis и lb по 0,5 CPU / 128 MiB.
Публичный тест отказа (make test-failover, 15 с записи во время остановки реплики):
| Прогон | Остановлена реплика | Реплик до отказа | Успешных записей | Неудачных попыток (повторены с тем же ключом) | Первая запись после hook, с |
|---|---|---|---|---|---|
| 1 | 58542a53644c | 2 | 128 | 0 | 4.203 |
| 2 | 9737b915ff2f | 2 | 132 | 0 | 4.281 |
Остановка каждой реплики под нагрузкой (student-tests/failover_metrics.py: 4 потока записи без пауз + 1 поток чтения, timeout клиента 2 с, 3 с до и 10 с после отказа):
| Реплика | Как остановлена | Команда, с | HAProxy вывел из балансировки через, с | Ошибок (коды) | Ошибки прекратились через, с | Записей/с до | Записей/с после | p95 после, мс | Вернулась в балансировку после docker start, с |
|---|---|---|---|---|---|---|---|---|---|
| 58542a53644c | docker stop (SIGTERM) | 4.12 | 1.11 | 0 (-) | 0.0 | 304.7 | 202.2 | 47.0 | 3.25 |
| 58542a53644c | docker kill (SIGKILL) | 0.81 | 0.11 | 2 (502: 2) | 0.05 | 328.7 | 228.2 | 32.0 | 1.55 |
| 9737b915ff2f | docker stop (SIGTERM) | 4.12 | 1.5 | 0 (-) | 0.0 | 288.7 | 232.7 | 32.0 | 4.09 |
| 9737b915ff2f | docker kill (SIGKILL) | 0.83 | 0.11 | 2 (502: 2) | 0.05 | 266.7 | 219.9 | 32.0 | 4.14 |
Во всех прогонах: потерянных подтверждённых сообщений 0, дублей 0, остановленная реплика после остановки не ответила ни разу.
Rolling update (student-tests/rolling_update.py): версия rolling-20261014-201405 -> rolling-20261014-202804, 2 реплики заменены по одной за 13.48 с под той же нагрузкой. Записей/с до: 284.7, во время замены: 346.3; ошибок: 0 (-); p95 31.0 мс, максимум 78.0 мс; подтверждено 6527 сообщений, потерь и дублей нет.
Публичный генератор нагрузки (tests/load.py, closed loop, concurrency 4, 30 с, 2 реплики): 308.848 успешных POST/с, ошибок 0 (доля 0.0), задержка успешных p50 15.0 мс, p95 32.0 мс, p99 46.0 мс.
| Воздействие | Что ожидаем | Что наблюдали | Время восстановления / потеря данных |
|---|---|---|---|
docker stop реплики (SIGTERM) под нагрузкой |
ошибок нет: реплика сначала уходит из балансировки (readiness 503), потом закрывает приём | ошибок: 0, 0 (по репликам); HAProxy вывел реплику через 1.11, 1.5 с | ошибки прекратились через 0.0 с; потерь 0, дублей 0; реплика вернулась через 4.09 с после docker start |
docker kill реплики (SIGKILL, авария) под нагрузкой |
единицы 502 на запросы, начатые на убитой реплике; клиент повторяет их с тем же ключом | ошибок: 2, 2 (по репликам); HAProxy вывел реплику через 0.11, 0.11 с | ошибки прекратились через 0.05 с; потерь 0, дублей 0; реплика вернулась через 4.14 с после docker start |
публичный make test-failover для каждой реплики |
запись продолжается не позже 10 с, подтверждённые сообщения на месте, дублей нет | PASS 2 раз(а), неудачных попыток: 0, 0 | первая запись после hook через 4.203, 4.281 с (hook ждёт остановки ~4 с); потерь нет |
| rolling update под нагрузкой | ошибок нет, реплик всё время не меньше 2 | ошибок: 0, замена заняла 13.48 с | потерь 0, дублей 0 |
перезапуск всего стенда (restart hook: postgres, redis, api, lb) |
данные и прежний токен живы | PASS, те же контейнеры с новым временем старта | 8.5 с до готовности; потерь нет |