Archive pool recovery and record current grade 3 evidence

This commit is contained in:
Artyom
2026-11-05 22:08:14 +03:00
parent 0a1f48bd73
commit ef0b9a385e
38 changed files with 1171 additions and 521 deletions
+110 -108
View File
@@ -2,30 +2,21 @@
- Автор, группа: Костылев Артём, БПИ2303
- Целевая оценка: **5**; трек «5» — **трек 1 «Цена масштабирования»**
- Commit/PR: ветка `solution/bpi2303-kostylev`. Код приложения (`src/`, `compose.yaml`, `Dockerfile`, `infra/`,
хуки) последний раз менялся в `aa1485b` и `d99a48a` — исправления второго ревью (цикл
`2026-10-30-close-lab3-second-review-gaps`: запрос, прерванный при остановке, получает `503` в формате контракта;
readiness за портом `Readiness`; событие `service.draining`); до них `a59e3a3` — перенос исправлений лабы 2 после
её ревью (цикл `2026-10-30-carry-over-lab2-review-fixes`), `e924281` — удалён комментарий `# type: ignore`,
`22f0e62` — улучшение трека 1 (отправка сообщения одной командой SQL) и `107fbbb` — закрепление CPU для замеров (по
умолчанию выключено). Обвязка (`Makefile`, `scripts/`, CI) последний раз менялась в `e049c26`. **Все доказательства
уровней «3» и «4»** (`checks`, `smoke`, `stack`, `environment`, `schema`, `migrations`, `kdf`, `secrets`,
`lb-check`, `retry`, `hooks`, `failover-*`, `persistence`, `faults`, `limits*`, `detection/`, `failover-each/`,
`rolling*/`, `student-tests`) и запуск из чистого clone сняты на итоговом коде `e049c26`; после него менялись только
`AGENTS.md`, openspec, отчёт и `evidence/`. Контрольные прогоны трека сняты на коде `b1c80ee`: после него код
менялся только в остановке, readiness и журнале, путь записи и пул те же. Серии трека A и B сняты на коде до
улучшения (его они и обосновывают), сравнение до/после — на `edc091d` против `22f0e62`. Дата и коммит — в первой
строке каждого отчёта `evidence/*.txt`, для JSON, CSV и сырья прогонов — в индексе `evidence/README.md`. PR «ЛР 3 —
БПИ2303 — Костылев — на 5» в репозиторий преподавателя заполняется по `.github/pull_request_template.md`; его
ссылка появляется при публикации
- Использованные источники, библиотеки и помощь ИИ: FastAPI, gunicorn + uvicorn-worker, dishka, pydantic,
structlog, asyncpg, argon2-cffi, redis-py, pytest, ruff, ty (версии — `evidence/environment.txt` и `uv.lock`);
HAProxy 3.2 Configuration Manual (health checks, resolvers, `retry-on`, `http-error`, `init-state`), Grafana k6
(`constant-arrival-rate`, `handleSummary`), uvicorn и gunicorn (порядок graceful shutdown), документация Docker
Compose (`deploy.replicas`, `depends_on`, secrets), PostgreSQL (`SELECT … FOR UPDATE`, `INSERT … ON CONFLICT`,
уровни изоляции, `WITH` с изменяющими данные операторами, `pg_stat_activity` и `pg_stat_statements`), IETF draft
«The Idempotency-Key HTTP Header Field», N. Gunther — Universal Scalability Law. Решение перенесено из моей лабы 2 и
выполнено с помощью Claude Code; код, стенд и отказы проверены прогонами, перечисленными ниже.
- Ветка: `solution/bpi2303-kostylev`. Текущий этап — повторная проверка уровня «3» после перехода
на SQLAlchemy 2.0.45 и Alembic 1.16.5; код прогонов — `0a1f48bd73e5780c732356880c23fdb476bcff98`.
**Уровень «3» подтверждён** на этом коде; после него меняются только отчёт, evidence и OpenSpec.
Публикация в этом этапе не выполняется.
- Уровень «4» и трек ниже пока содержат **исторические результаты raw asyncpg**. Они не подтверждают
текущую производительность и отказоустойчивость под нагрузкой. Активный change
`2026-11-05-adopt-sqlalchemy-alembic` остаётся открытым до последовательных этапов «4» и трека.
- Источники и инструменты: FastAPI, gunicorn + uvicorn-worker, dishka, pydantic, structlog,
SQLAlchemy, Alembic, asyncpg как драйвер, argon2-cffi, redis-py, pytest, ruff, ty; версии —
`evidence/environment.txt` и `uv.lock`. Документация установленного SQLAlchemy проверена через
Context7: [async sessions](https://github.com/sqlalchemy/sqlalchemy/blob/rel_2_0_45/doc/build/orm/extensions/asyncio.rst),
[проверка соединений](https://github.com/sqlalchemy/sqlalchemy/blob/rel_2_0_45/doc/build/core/pooling.rst);
Alembic — [async cookbook 1.16.5](https://github.com/sqlalchemy/alembic/blob/rel_1_16_5/docs/build/cookbook.rst).
Инфраструктура опирается на HAProxy 3.2 Manual, Docker Compose, PostgreSQL и k6.
Решение перенесено из собственной ЛР2; текущий этап выполнен с помощью Codex.
## Запуск из чистого clone
@@ -34,6 +25,8 @@
```sh
git clone <repo> && cd mtusi2026lab3 && git checkout solution/bpi2303-kostylev
export COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3
export LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2
make secrets # secrets/*: пароли PostgreSQL и Valkey, DATABASE_URL, CACHE_URL, ключ курсора; .env из .env.example
docker compose --env-file .env config --quiet
@@ -47,11 +40,10 @@ make restore # вернуть остановленную реплику
curl -s -o /dev/null "http://$(docker compose port lb 8080)/health/live" # сдвиг round robin: следующий прогон остановит другую реплику
make test-failover ACTION_SCRIPT=scripts/stop-one.sh && make restore
make test-persistence ACTION_SCRIPT=scripts/restart.sh
make migrate # повторный запуск миграций: «up to date», данные не меняются
make migrate # повторный alembic upgrade head, версия и данные не меняются
make storage-evidence # \d+ схемы, повтор миграций, префикс KDF, правила ignore и volumes проекта → evidence/
make down # безопасная остановка: контейнеры и сети удаляются, volumes с данными остаются
make reset-data # НАМЕРЕННОЕ удаление учебных данных: docker compose down -v --remove-orphans
```
`make secrets` идемпотентен: существующие файлы не перезаписываются, значения нигде не печатаются; `make up`
@@ -60,24 +52,19 @@ make reset-data # НАМЕРЕННОЕ удаление учебных да
`rise 2` проверок, примерно через 2,5 с, и без этого ожидания `make test-failover` сразу после `make up` мог увидеть
один `X-Instance-Id`. Миграции применяет одноразовый `migrate` под advisory lock
до старта реплик; реплики схему не трогают. Публикуются только порты `lb` на `127.0.0.1`: `LB_HTTP_PORT`
(по умолчанию 8080) и `LB_STATS_PORT` (8404, статистика только для чтения). На машине, где выполнялась работа,
параллельно работали стенды других лаб, поэтому в локальном `.env` стояли `LB_HTTP_PORT=18083`,
(по умолчанию 8080) и `LB_STATS_PORT` (8404, статистика только для чтения). В текущем прогоне переменные окружения задают `LB_HTTP_PORT=18083`,
`LB_STATS_PORT=23083`. Цели `make` берут `BASE_URL` по умолчанию из `docker compose port lb 8080`, то есть
работают и с изменённым `LB_HTTP_PORT`; без поднятого стенда — `http://localhost:8080`, явный `BASE_URL=…`
переопределяет. Цель failover-теста выбирает round robin (реплика, обслужившая первое сообщение); второй
прогон сразу после первого попадает в ту же реплику, поэтому перед ним нужен один запрос через LB (строка
`curl …/health/live` выше или `make failover-evidence SHIFT=1`).
Последний прогон из свежего clone (`evidence/clean-clone.txt`, коммит `e049c26`, каталог `mtusi2026lab3-clean` —
свой compose-проект и пустые volumes, `LB_HTTP_PORT=18083`, **без `BASE_URL`**). Шаги — команды блока выше дословно,
кроме правки портов в `.env`; между шагами — наблюдения (`docker compose ps`, статистика LB, `docker volume ls`),
помеченные в файле. `config --quiet` — код 0; `make up` — 10 с вместе с ожиданием реплик, статистика LB сразу после —
`api1 UP`, `api2 UP`; `migrate` применил `0001_init` и `0002_idempotency_keys` и вышел с кодом 0; smoke `PASS`;
`lb-check` — 20 + 20 `GET` на две реплики, 160 × `201` в гонках ключа; `retry-check` — оба варианта `pass`; failover
обеих реплик по очереди (второй — после одного `GET` через LB) — по 135 записей, 0 ошибок, первая запись через 2.911
и 2.572 с, остановлены `api-2` (`Exited (0)`), затем `api-1` (её поднял следующий `make restore`); persistence
`PASS`; повторный `migrate` — `up to date`; `make storage-evidence` — код 0, volumes проекта только
`mtusi2026lab3-clean_*`; после `make down` volumes остались, после `make reset-data` их 0.
Прогон текущего этапа выполнен из рабочего checkout, на новом Compose-проекте
`mtusi2026lab3-grade3-final-20261105` и пустых volumes, с указанными портами и без явного `BASE_URL`.
`evidence/grade3-start.txt` содержит пустой список volumes перед запуском, сборку, `make up`,
`docker compose ps -a` и версию Alembic `0002_idempotency_keys`. Старые volumes не удалялись.
Исторический запуск именно из clone сохранён в `evidence/clean-clone.txt` (`e049c26`);
он не подменяет проверки текущего SQL-слоя.
Собственные проверки и тулчейн:
@@ -85,7 +72,7 @@ make reset-data # НАМЕРЕННОЕ удаление учебных да
make install # uv sync --group dev (Python 3.14 и зависимости из uv.lock)
make lint # ruff check + ruff format --check (src, student-tests, scripts/{probe,limits,scaling}.py, tools) + ty check
make student-test # собственные тесты; поднимают одноразовые PostgreSQL и Valkey того же образа в Docker
PYTEST_ADDOPTS=-vv make student-test # то же с именами тестов (так снят evidence/student-tests.txt)
make student-test PYTEST_ARGS=-vv # то же с именами тестов (так снят evidence/student-tests.txt)
make check # офлайн-проверка skeleton
make validate # полная валидация OpenAPI 3.1 и примеров (openapi-spec-validator из dev-группы .venv)
make test-faults # тесты стенда лабы 2 (Valkey, PostgreSQL, гонки) через балансировщик
@@ -129,7 +116,7 @@ Docker 28.3.2, Compose 2.38.2. Машина — Apple M4 Max, 16 CPU, 48 ГБ RA
## Архитектура и решения
```
┌── api (gunicorn, 2 × UvicornWorker) ──┐ asyncpg pool, 1–2 с
┌── api (gunicorn, 2 × UvicornWorker) ──┐ SQLAlchemy async pool, 1–2 с
клиент ──HTTP──▶ lb (HAProxy 3.2) ───┤ X-Instance-Id = hostname ├──▶ postgres (источник истины, pgdata)
127.0.0.1:8080 round robin, └── api (gunicorn, 2 × UvicornWorker) ──┘──▶ valkey (кэш сессий, AOF, valkeydata)
httpchk /health/ready migrate (тот же образ, один раз до реплик) ──▶ postgres
@@ -153,6 +140,22 @@ advisory lock, тесты стенда (`make test-faults`). Уже в лабе
`503 unavailable` в формате контракта (был `text/plain 500` uvicorn без `X-Request-Id` и `X-Instance-Id`), readiness
стоит за портом `Readiness`, а окно вывода пишется событием `service.draining` (цикл `2026-10-30-close-lab3-second-review-gaps`).
**SQLAlchemy и Alembic.** ORM-модели и Core-запросы остаются в инфраструктуре зон;
домен — dataclass, pydantic — на HTTP-границе. `Database` создаёт async engine
`postgresql+asyncpg`, `async_sessionmaker(expire_on_commit=False)` и ограниченный пул без overflow.
Каждая операция получает собственный `AsyncSession`; незавершённая транзакция откатывается при закрытии.
`pool_pre_ping=True` проверяет соединение до его выдачи бизнес-операции. Без этого после возврата
PostgreSQL readiness могла уже быть успешной, а регистрация через другое соединение получала `503`.
Проверка заменяет закрытое соединение; уже начатые транзакции автоматически не повторяются.
Цена — дополнительное обращение к БД на выдаче открытого соединения; старые RPS трека к этому коду неприменимы.
One-shot `migrate` выполняет `alembic upgrade head` под advisory lock. Журнал — `alembic_version`,
актуальная ревизия — `0002_idempotency_keys`. На старом volume принимается только проверенная схема:
`alembic/legacy.py` сверяет журнал и каталог PostgreSQL, сохраняет строки и прежний `schema_migrations`.
Безусловного stamp нет. Свежая схема, сохранение данных, откат неуспешной миграции и два мигратора
проверяются в `student-tests/api/test_migrations.py`; повтор на реальном стенде — `evidence/migrations.txt`.
**`X-Instance-Id`.** `PlatformSettings.instance_id` по умолчанию — `socket.gethostname()`; Docker даёт
контейнеру hostname, равный короткому ID, поэтому значение одно на все воркеры реплики, стабильно на жизнь
контейнера и совпадает с `docker ps` (`evidence/stack.txt`). Конвейер ставит заголовок рядом с
@@ -163,14 +166,14 @@ advisory lock, тесты стенда (`make test-faults`). Уже в лабе
**Идемпотентная отправка (зона `messaging`).** Таблица `idempotency_keys (chat_id, user_id, key, fingerprint,
message_id, created_at)`, PK `(chat_id, user_id, key)` — область «пользователь + метод + путь чата + ключ»
(ключ бывает только у `POST …/messages`), FK `(chat_id, user_id) → chat_members` и `message_id → messages`,
`CHECK` формата ключа и длины отпечатка. После трека 1 отправка — **одна команда SQL** без явной транзакции
`CHECK` формата ключа и длины отпечатка. После трека 1 отправка — **один изменяющий SQL-оператор**; после перехода на SQLAlchemy он выполняется в транзакции с явным `session.commit()`
(`PostgresMessageLog.post`, порт `MessageLog`; до трека было пять обращений, три из них под блокировкой чата):
1. CTE `chat`: строка чата `FOR UPDATE`, соединённая с членством отправителя; нет строки → `404`;
2. `created_at = GREATEST(часы реплики, last_message_at + 1 мкс)` — история чата не идёт назад;
3. `INSERT idempotency_keys … ON CONFLICT DO UPDATE … WHERE` ключ истёк — живой ключ не трогается;
4. `INSERT messages` только если ключ записан, `UPDATE chats.last_message_at`; команда фиксируется сама;
5. ключ занят → вторая команда вне блокировки читает квитанцию, моложе `IDEMPOTENCY_TTL_SECONDS`: тот же
4. `INSERT messages` только если ключ записан, `UPDATE chats.last_message_at`; сообщение и ключ фиксируются вместе через `session.commit()`;
5. ключ занят → следующая команда в том же `AsyncSession` читает квитанцию, моложе `IDEMPOTENCY_TTL_SECONDS`: тот же
отпечаток → сохранённое сообщение (`201`, тот же `MessageOut`, `created_at` с микросекундами); другой → `409`.
Порядок проверок отправки: сессия (`401`) → форма запроса: `Idempotency-Key`, malformed JSON, лишние поля и
@@ -220,13 +223,14 @@ SHA-256 канонического JSON распарсенной модели,
**Проверки, период и максимум обнаружения.** `GET /health/ready` раз в `inter 1s`; после первого провала —
`fastinter 500ms`; `fall 2` провала — реплика исключена; `rise 2` успеха — возвращена; `timeout check 1s`;
у `DOWN`-реплики — `downinter 2s`. Readiness пингует PostgreSQL за ≤0,8 с (0,4 с на соединение из пула и 0,4 с
на `SELECT 1`), то есть отвечает явным `503` раньше таймаута проверки. `init-state fully-down`: сервер, который
у `DOWN`-реплики — `downinter 2s`. Readiness пингует PostgreSQL за ≤0,4 с (общий дедлайн на получение соединения и `SELECT 1`), то есть отвечает явным `503` раньше таймаута проверки. `init-state fully-down`: сервер, который
стартовал, появился через DNS или вернулся из `MAINT (resolution)`, получает трафик только после `rise 2`
проверок (без этого HAProxy делал его `UP/READY` сразу по DNS-ответу, и запросы уходили в ещё не слушающий
gunicorn — первый прогон `failover-each` показал `wredis` 19 и 49 без ошибок; это записано в `design.md`
изменения `2026-10-28-add-lab3-failover-operations`, сырьё того прогона заменено повторным с `init-state`).
Следующая таблица содержит исторические замеры до SQLAlchemy; текущий этап не повторяет `make detection`.
| Отказ | Как замечает LB | Максимум обнаружения | Замер (`make detection`) |
| --- | --- | --- | --- |
| `SIGTERM` (`docker stop`, `stop-one.sh`) | readiness `503` в окне вывода | `inter + (fall−1)·fastinter` = 1,5 с, и раньше закрытия порта (2 с) | 1,26–1,35 с; действие (`docker stop -t 7`) завершилось через 2,47–2,56 с |
@@ -236,8 +240,8 @@ gunicorn — первый прогон `failover-each` показал `wredis` 1
Замер — три прогона `make detection` подряд (`evidence/detection/run{1,2,3}/`), в таблице диапазон. Время
считается от запуска команды отказа, поэтому замер включает задержку docker CLI до сигнала и период опроса
статистики LB (50 мс) и может превысить формулу на эту величину: допуск замера — 0,25 с. На итоговом коде все 12
замеров уложились в формулу без допуска (в `faults.txt` остановка PostgreSQL — 1,04 с); раньше допуск
статистики LB (50 мс) и может превысить формулу на эту величину: допуск замера — 0,25 с. На коде до SQLAlchemy все 12
замеров уложились в формулу без допуска (в историческом `faults.txt` остановка PostgreSQL — 1,04 с); раньше допуск
понадобился: на `a02d442` у PostgreSQL в двух прогонах из трёх (1,553 и 1,551 с), при ревью — у `SIGTERM` (1,609 с),
на `e00eb6c` — у `SIGTERM` в `failover-each` (1,515 с). Возврат в ротацию после восстановления — 2,35–3,56 с.
@@ -249,7 +253,7 @@ gunicorn — первый прогон `failover-each` показал `wredis` 1
| LB `timeout server` | 10 с | > `REQUEST_TIMEOUT_SECONDS` |
| `REQUEST_TIMEOUT_SECONDS` | 8 с | > ожидание соединения + оператор БД |
| `DB_ACQUIRE_TIMEOUT_SECONDS` + `DB_COMMAND_TIMEOUT_SECONDS` (`statement_timeout` = `lock_timeout`) | 1 + 2 с | ≤ дообработки после окна |
| LB `timeout check` | 1 с | > readiness 0,8 с |
| LB `timeout check` | 1 с | > readiness 0,4 с |
| `DRAIN_SECONDS` | 2 с | > обнаружения 1,5 с |
| дообработка после окна (uvicorn `timeout_graceful_shutdown`) | `SHUTDOWN − DRAIN − 1` = 3 с | ≥ таймаутов БД 1 + 2 с; затем зависший запрос → `503 unavailable` |
| `SHUTDOWN_TIMEOUT_SECONDS` (gunicorn `graceful_timeout`) | 6 с | > окна + дообработки; < `STOP_TIMEOUT` хука |
@@ -278,7 +282,7 @@ gunicorn — первый прогон `failover-each` показал `wredis` 1
Готовность реплики зависит только от PostgreSQL: Valkey — кэш, при его отказе проверка идёт в БД. Общее
хранилище сессий — PostgreSQL (источник истины) плюс общий Valkey. Bootstrap: `make secrets` (идемпотентен,
не перезаписывает существующие файлы), `make up` (миграции — `migrate` под advisory lock); повтор безопасен
(`make migrate` → `up to date`). Лимиты: lb 1 CPU/128m, api 1 CPU/512m на реплику, migrate 0.5/256m,
(`make migrate` → код 0, версия Alembic и счётчики строк неизменны). Лимиты: lb 1 CPU/128m, api 1 CPU/512m на реплику, migrate 0.5/256m,
postgres 2/1g, valkey 0.5/128m, k6 2/512m (`make limits` сверяет их и изоляцию с политикой).
**Соответствие `.env.example` реальной конфигурации:**
@@ -304,32 +308,32 @@ postgres 2/1g, valkey 0.5/128m, k6 2/512m (`make limits` сверяет их и
## Доказательства критериев
Все проверки через LB шли на порт 18083: цели `make` берут `BASE_URL` из `docker compose port lb 8080` (см.
«Запуск»). Дата и коммит прогона — в первой строке отчёта `*.txt`, для JSON, CSV и сырья прогонов — в индексе
`evidence/README.md`.
Все текущие проверки выполнены 2026-11-05 на `0a1f48bd73e5780c732356880c23fdb476bcff98`.
Стенд — `mtusi2026lab3-grade3-final-20261105`, LB `127.0.0.1:18083`, статистика `23083`;
`BASE_URL` автоматически определяется Makefile. Даты, команды, коды завершения и SHA — в `evidence/`.
| Критерий README | Команда/сценарий | Наблюдаемый результат | Файл доказательства |
| --- | --- | --- | --- |
| Публичный smoke | `make test` | `PASS: lab3 public API scenario` (включая replay == first, `409` на другой body, `400` без ключа, `X-Instance-Id` на каждом ответе); на итоговом коде — тоже `PASS` | `evidence/smoke.txt`, `evidence/clean-clone.txt`, `evidence/track1/after-checks.txt` |
| Офлайн-контракт, OpenAPI и тулчейн | `make check`; `make validate`; `make lint` | `PASS: offline skeleton structure, local refs and Python syntax`; `PASS: full OpenAPI 3.1 and JSON Schema validation`; ruff `All checks passed!`, 104 files already formatted, ty `All checks passed!` | `evidence/checks.txt` |
| Контракт, публичные тесты и задание не изменены; собственный CI | `git diff --stat upstream/main -- contracts tests README.md COURSE.md lab.json MAINTAINERS.md`; `git diff --stat upstream/main -- .github` | первый вывод пуст; во втором — только добавленный `.github/workflows/application.yml` (+82), шаблон PR не изменён. Job `quality` — `make lint`, `make student-test`; job `acceptance` — стенд из clone (`make up`), smoke, `lb-check`, `retry-check`, failover с `docker compose ps -a`, persistence, `test-faults`, `limits`, `detection`, порты только у `lb`, числовой uid процессов ≠ 0 (`docker top -eo pid,uid,comm`), остановка реплик по `SIGTERM` ≤10 с с кодом 0 (запускается в GitHub Actions при публикации) | `evidence/checks.txt`, `.github/workflows/application.yml` |
| Запуск из чистого clone | команды блока «Запуск» дословно: `git clone`, `make secrets`, `config --quiet`, `make up`, `make test`, `make lb-check`, `make retry-check`, failover ×2 с `restore`, persistence, `make migrate`, `make storage-evidence`, `make down`, `make reset-data` | `config` — код 0; `make up` 10 с с ожиданием обеих реплик в LB, `migrate` применил `0001`/`0002` и `Exited (0)`; smoke, `lb-check`, `retry-check`, failover обеих реплик, persistence `PASS` без явного `BASE_URL` при `LB_HTTP_PORT=18083`; повтор миграций `up to date`; после `down` 2 volume, после `reset-data` 0 | `evidence/clean-clone.txt` |
| **3.1** Весь стенд в `compose.yaml`, ≥2 API, одна точка входа, общая БД и общее хранилище сессий | `make stack-evidence` (`config --quiet`, `ps`, `docker port` реплик, `docker inspect`, статистика LB) | 2 контейнера `api` без портов (`docker port` пуст), порты только у `lb` на `127.0.0.1`; `container_name` 0; LB видит `api1 UP L7OK 200`, `api2 UP L7OK 200`; один `postgres`, один `valkey` | `evidence/stack.txt` |
| **3.2** Разные запросы одного пользователя — разные реплики без повторного входа, видно по `X-Instance-Id` | `make lb-check` (40 × `GET /users/me` одним токеном, новые соединения) + `docker inspect` | `{"fe75c6c37e5a": 20, "ff81f93e8b0d": 20}` — ровно hostname двух контейнеров `api`; из чистого clone — тоже 20 + 20 | `evidence/lb-check.json`, `evidence/stack.txt`, `evidence/clean-clone.txt` |
| **3.3** Остановка любой одной реплики: ≤10 с, данные доступны, ошибки измерены | `make failover-evidence` → `make test-failover ACTION_SCRIPT=scripts/stop-one.sh`, `docker inspect` до/после, `restore`; затем `make failover-evidence SHIFT=1` — один `GET /health/live` через LB перед тестом сдвигает round robin на другую реплику | реплика `ff81f93e8b0d`: первая запись после хука через 2.858 с от его старта, 132 записи, 0 ошибок; реплика `fe75c6c37e5a` (прогон с `SHIFT=1`): 2.682 с, 136, 0; после теста `exited` именно target, вторая `running`; в логе остановленной — сигнал, `service.draining` обоих воркеров (окно вывода из ротации), readiness `503`, закрытие и выход; `PASS: failover …` | `evidence/failover-ff81f93e8b0d.txt`, `evidence/failover-fe75c6c37e5a.txt` |
| **3.3** Хук останавливает только заданную реплику | `scripts/stop-one.sh` с hostname, с неизвестным ID и без него | хук 2.66 с (окно вывода 2 с + остановка), код 0, target `exited exit_code=0`, вторая `running`; неизвестный ID → код 3, всё работает; без переменной → код 1 | `evidence/hooks.txt` |
| **3.4** Повтор с тем же ключом не создаёт дубль; конкурентный повтор и смена реплики | `make lb-check` (20 раундов × 8 параллельных POST с одним ключом через LB); `make retry-check` (повтор потерянной записи через другую реплику); `PYTEST_ADDOPTS=-vv make student-test` | 160 × `201` от обеих реплик (80 + 80); в каждом из 20 раундов тела равны, в истории 1 копия, другой body → `409`; в `retry-check` оба повтора обслужила не та реплика, что приняла первую попытку, — 1 копия с тем же `id`; `test_replay_returns_the_same_message`, `test_same_json_in_other_layout_is_a_replay`, `test_other_body_with_same_key_conflicts`, `test_concurrent_retries_through_two_replicas_store_one_message` (8 повторов через два экземпляра приложения → одна строка ключа) — `PASSED` | `evidence/lb-check.json`, `evidence/retry.json`, `evidence/student-tests.txt` |
| **3.4** Неподтверждённую запись можно безопасно повторить | `make retry-check`: `psql` держит `SELECT … FOR UPDATE` строки чата 1,5 с (меньше `lock_timeout` 2 с), запрос с ключом и таймаутом клиента 0,5 с ждёт блокировку и остаётся без ответа, затем повтор с тем же ключом и текстом через LB; вариант «kill» — реплику, чей запрос ждёт (по `client_addr` в `pg_stat_activity`), убивают `docker kill`; `PYTEST_ADDOPTS=-vv make student-test` | «таймаут»: первая попытка без ответа, реплика `fe75c6c37e5a` сама ответила на неё `201` (её журнал), повтор через 1,522 с от `ff81f93e8b0d` — `201` с первой попытки, в истории 1 копия с тем же `id`, записала её первая попытка (`created_at` раньше повтора); «kill»: `ff81f93e8b0d` убита, пока её запрос ждал, повтор от `fe75c6c37e5a` — `201`, 1 копия с тем же `id`, и её тоже записала потерянная попытка — PostgreSQL доработал команду ушедшего клиента; `pass: true`. Failover-тесты такого повтора не дают: во всех прогонах 0 неудачных попыток. In-process: `test_rejected_attempt_does_not_take_the_key` (`4xx` не занимает ключ), `test_expired_key_starts_over`, `test_replay_checks_session_and_access_again` — `PASSED` | `evidence/retry.json`, `evidence/student-tests.txt` |
| **3.5** `make test`, persistence и failover проходят; ≥2 наблюдаемых реплики | `make test`, `make persistence-evidence`, `make test-failover …` | smoke `PASS`; persistence `PASS`, `StartedAt` у `lb`, обеих `api`, `postgres`, `valkey`, `migrate` после теста новее, ID контейнеров те же; failover `observed_instances_before: 2`; на итоговом коде — то же | `evidence/smoke.txt`, `evidence/persistence.txt`, `evidence/failover-*.txt`, `evidence/clean-clone.txt` |
| Перенос lab2: схема PK/FK/UNIQUE и миграции с нуля, повтор без дублей | чистый clone (`make up` на пустом volume); `make storage-evidence` | `0001_init`, `0002_idempotency_keys` применены на пустом volume; `\d+` всех таблиц; повтор `up to date`, счётчики строк до и после равны (сообщений столько же, сколько ключей: 30 748 и 30 748) | `evidence/clean-clone.txt`, `evidence/schema.txt`, `evidence/migrations.txt` |
| Перенос lab2: Basic только на `/auth/sessions`, Bearer, logout, `X-User-Id` игнорируется | `make test`; `PYTEST_ADDOPTS=-vv make student-test`; `make test-faults` | smoke `PASS`; тесты `test_sessions.py`, `test_authentication.py`, `test_negative.py` — `PASSED`; logout `204` → `401` → `401` через LB | `evidence/smoke.txt`, `evidence/student-tests.txt`, `evidence/faults.txt` |
| Перенос lab2: password KDF | `make storage-evidence` | `$argon2id$v=19$m=19456,t=2,p=1$` у всех 120 пользователей; в `sessions` (114) только 32-байтовые SHA-256 | `evidence/kdf.txt` |
| Перенос lab2: секреты и volumes вне Git | `git ls-files secrets .env`; `git check-ignore -v …`; в чистом clone `git status --ignored` | пусто; пути игнорируются; в clone `secrets/` и `.env` — `!!` (ignored) | `evidence/secrets.txt`, `evidence/clean-clone.txt` |
| Перенос lab2: отказы Valkey и PostgreSQL через LB | `make test-faults` (`BASE_URL` — порт `lb`) | 12 passed: гонка регистрации 201×1/409×49, чат с несуществующим участником `400`, остановка Valkey (выход `503`, затем `204`) и PostgreSQL (`503` за ≤0.014 с; live внутри реплики `200`; LB исключил обе реплики ещё через 1.04 с и сам отвечает `503`; готовность через 2.1 с), рестарт API (готовность 2.3 с), полный рестарт с выходом `204` → `401`, срок сессии после рестарта не продлевается | `evidence/faults.txt` |
| `X-Instance-Id` на каждом ответе приложения | `PYTEST_ADDOPTS=-vv make student-test` (`test_instance.py`) | `test_every_response_names_the_replica` (`200`, `401`, `404`, скрытый `405` как `404`, `400`, `204`), `test_rejected_body_names_the_replica` (`413`), `test_unhandled_error_names_the_replica` (`500`), `test_replica_defaults_to_container_hostname` — `PASSED` | `evidence/student-tests.txt`, `student-tests/api/test_instance.py` |
| Непривилегированные процессы | `make stack-evidence`; снимок окружения | api — uid 10001, lb — 99 (`haproxy`), postgres — 70, valkey — 999 | `evidence/stack.txt`, `evidence/environment.txt` |
| **3.1** Документированный запуск, ≥2 API, общая БД и сессии, одна точка входа | `make up`; `make stack-evidence` | Новые пустые volumes; `migrate` завершился с 0, версия `0002_idempotency_keys`; обе API healthy/UP, один PostgreSQL и Valkey; API без опубликованных портов, только LB на 18083/23083; `container_name` отсутствует | `evidence/grade3-start.txt`, `evidence/stack.txt`, `evidence/environment.txt` |
| **3.2** Один токен работает через разные реплики | `make lb-check` | 40 GET: `1b4a73f61b07` и `8ffe0c70f4ea` по 20 ответов; hostname совпадают с двумя контейнерами | `evidence/lb-check.json`, `evidence/grade3-lb-check.txt`, `evidence/stack.txt` |
| **3.3** Остановка любой одной реплики, чтение/запись ≤10 с | `make test-failover ACTION_SCRIPT=scripts/stop-one.sh`; `docker compose ps -a`; `make restore`; сдвиг round robin и повтор | По очереди остановлены `api-1` (`8ffe0c70f4ea`) и `api-2` (`1b4a73f61b07`), обе с `Exited (0)`; сосед продолжал работать. Первая запись после хука через 2.762 / 2.817 с, 129 / 128 успешных записей, 0 / 0 ошибок, по 2 наблюдаемых реплики; история подтверждённых сообщений сохранена | `evidence/failover-current-1.txt`, `evidence/failover-current-2.txt`, `evidence/grade3-restore-1.txt`, `evidence/grade3-restore-2.txt` |
| **3.4** Конкурентный одинаковый ключ и смена реплики | `make lb-check` | 20 раундов × 8 POST: 160 ответов 201, по 80 от каждой реплики; 20/20 одинаковых тел, одна копия в истории, другой body → 409 | `evidence/lb-check.json`, `evidence/grade3-lb-check.txt` |
| **3.4** Безопасный повтор неподтверждённой записи | `make retry-check` | При блокировке чата 1.5 с клиент прекращает ожидание через 0.5 с. Повтор с тем же ключом на другой реплике: 201 с первой попытки, одна копия и тот же ID. Оба варианта — живая реплика и `docker kill` ожидающей реплики — прошли; повтор через 1.539 / 1.551 с | `evidence/retry.json`, `evidence/grade3-retry.txt` |
| **3.5** Публичный smoke, persistence и failover | `make test`; `make persistence-evidence` (вызывает `make test-persistence ACTION_SCRIPT=scripts/restart.sh`); два failover выше | Все PASS. При persistence прежний токен и история сохранились, IDs контейнеров те же, StartedAt у lb, обеих API, postgres, valkey и migrate обновились | `evidence/smoke.txt`, `evidence/persistence.txt`, `evidence/grade3-persistence.txt`, `evidence/failover-current-*.txt` |
| Перенос lab2: миграции, схема и повтор без изменения данных | `make up` на пустых volumes; `make storage-evidence` | PK/FK/UNIQUE/CHECK и индексы показаны в схеме; Alembic head `0002_idempotency_keys`. Повтор миграций: код 0, до/после 70 users, 24 sessions, 6 chats, 12 members, 284 messages и 284 keys, 1 строка версии | `evidence/schema.txt`, `evidence/migrations.txt`, `evidence/grade3-storage.txt` |
| Перенос lab2: KDF, сессии, секреты | `make storage-evidence`; `make test`; `make test-faults` | Все 70 паролей — Argon2id, 24 хеша токенов по 32 байта; секреты и .env не отслеживаются Git. Basic/Bearer, logout 204 → 401 и абсолютный TTL сохраняются | `evidence/kdf.txt`, `evidence/secrets.txt`, `evidence/smoke.txt`, `evidence/faults.txt` |
| Перенос lab2: отказы PostgreSQL/Valkey | `make test-faults` | 12 passed. PostgreSQL недоступен → 503 за ≤0.014 с, live внутри API 200; после старта ready через 2.0 с, прежний токен 200, 40 новых регистраций 201 через обе реплики без рестарта API. Valkey обходится для проверки сессии, logout при отказе 503 и после возврата 204 | `evidence/faults.txt` |
| Негативные случаи и заголовки, гонки, миграции | `make student-test PYTEST_ARGS=-vv` | 271 passed, 12 deselected (стендовые тесты запущены отдельно). Включены X-Instance-Id/X-Request-Id на ошибках, ключи/доступ/TTL, 22 миграционных теста и первый POST после закрытия соединения | `evidence/student-tests.txt` |
| Контракт, OpenAPI, форматирование и типы | `make check`; `make validate`; `make lint`; `uv lock --check`; `openspec validate --all --strict` | Все успешно; 107 файлов соответствуют формату. Diff нормативных файлов против upstream пуст | `evidence/checks.txt` |
| Остановка без удаления данных | `make down`; `docker compose ps -a`; `docker volume ls --filter label=…` | Контейнеров этапа нет; оба volumes финального и исходного прогонов сохранены | `evidence/grade3-stop.txt`, `evidence/grade3-initial-stop.txt` |
**Уровень «4».** Нагрузка — k6 open model из сети `edge` в `lb:8080`: 100 запросов/с постоянной
**Уровень «4» — исторические прогоны `e049c26`, до SQLAlchemy.** Повторная проверка
текущего кода выполняется следующим этапом. Приведённые ниже результаты не заявляются как актуальные.
Исторические версии перезаписанных файлов доступны как `git show 7fc911c:evidence/<имя>`;
текущие файлы уровня «3» содержат новые прогоны.
Нагрузка — k6 open model из сети `edge` в `lb:8080`: 100 запросов/с постоянной
интенсивности (80 % `POST` сообщения с уникальным ключом, 20 % чтения первой страницы истории), 20
пользователей и 10 чатов, прогрев 10 с, замер 60–90 с; параллельно зонд шлёт сообщение каждые 0,1 с и после
ошибки повторяет тот же ключ, а опрос статистики LB 10 раз в секунду пишет число `UP`. Счётчики LB —
@@ -337,16 +341,16 @@ postgres 2/1g, valkey 0.5/128m, k6 2/512m (`make limits` сверяет их и
| Критерий README | Команда/сценарий | Наблюдаемый результат | Файл доказательства |
| --- | --- | --- | --- |
| **4.1** Health/readiness, таймауты и прекращение приёма при `SIGTERM` согласованы | `make student-test` (`test_timeouts.py`, `test_drain.py`, вывод `-s`) | цепочка: LB server 10 с > запрос 8 с > БД 3 с; readiness 0,8 с < check 1 с; окно 2 с > обнаружение 1,5 с; дообработка 3 с ≥ БД 3 с; остановка 6 с < хук 7 с < `stop_grace_period` 8 с; настоящий gunicorn по `SIGTERM` (в тесте окно 1 с, срок 3 с): ready/live `(503, 200)` в окне, порт закрыт через 1.17 с, запрос, принятый до сигнала и дописанный после закрытия порта, получил `201`, запрос, тело которого так и не пришло, прерван ответом `503 unavailable` в общем формате (`application/json`, `request_id` = `X-Request-Id`, есть `X-Instance-Id`), выход через 2.43 с | `evidence/student-tests.txt`, `compose.yaml`, `infra/haproxy/haproxy.cfg`, `src/messenger/gunicorn_conf.py` |
| **4.1** Health/readiness, таймауты и прекращение приёма при `SIGTERM` согласованы | `make student-test` (`test_timeouts.py`, `test_drain.py`, вывод `-s`) | цепочка: LB server 10 с > запрос 8 с > БД 3 с; readiness 0,4 с < check 1 с; окно 2 с > обнаружение 1,5 с; дообработка 3 с ≥ БД 3 с; остановка 6 с < хук 7 с < `stop_grace_period` 8 с; настоящий gunicorn по `SIGTERM` (в тесте окно 1 с, срок 3 с): ready/live `(503, 200)` в окне, порт закрыт через 1.17 с, запрос, принятый до сигнала и дописанный после закрытия порта, получил `201`, запрос, тело которого так и не пришло, прерван ответом `503 unavailable` в общем формате (`application/json`, `request_id` = `X-Request-Id`, есть `X-Instance-Id`), выход через 2.43 с | `evidence/student-tests.txt`, `compose.yaml`, `infra/haproxy/haproxy.cfg`, `src/messenger/gunicorn_conf.py` |
| **4.1** LB исключает недоступный backend; период проверок и максимум обнаружения | `make detection` (три прогона) | период 1 с (0,5 с после провала), `fall 2`/`rise 2`; заявлено ≤1,5 с (`503`/отказ соединения) и ≤3,5 с (зависание), допуск замера 0,25 с; измерено (min–max трёх прогонов): `SIGTERM` 1.259–1.348 с — раньше конца остановки (2.471–2.555 с), `kill` 0.420–0.526 с, `pause` 2.926–3.063 с, PostgreSQL 1.263–1.266 с до 0 `UP` и `503 unavailable` от LB; возврат 2.347–3.555 с; все 12 `pass: true`, все в пределах формулы без допуска | `evidence/detection/run{1,2,3}/{sigterm,kill,pause,postgres}.json` |
| **4.2** Последовательно остановить каждую реплику (с восстановлением предыдущей); RPS, ошибки, время восстановления | `make failover-each` (на реплику: `stop-one.sh`, `docker compose ps -a` реплик, 10 с без неё, `restore.sh` — всё внутри окна нагрузки) | `ff81f93e8b0d`: 100.02 rps, 6001 запрос k6, ошибок 0, p50/p95/p99 1.60/3.92/7.31 мс, обнаружение 1.405 с, возврат в ротацию через 14.834 с от начала действия (действие 15.296 с: хук + 10 с + restore), зонд 646 попыток / 0 ошибок, пока реплика исключена, её `X-Instance-Id` не встречался (121 ответ только от `fe75c6c37e5a`); `fe75c6c37e5a`: 100.02 rps, 6001, 0 ошибок, 1.57/3.62/6.24 мс, 0.859 с, 14.343 с, 646/0; в `action.txt` сразу после хука — `Exited (0)` у остановленной и `Up (healthy)` у второй, затем снимок без остановленной реплики: база 9,7 и 12,9 МБ (2 759 и 9 053 сообщения по `n_live_tup`), оставшаяся реплика 12,8 и 22,8 % CPU, 126 и 142 МиБ из 512, PostgreSQL ≈4 % и 49–55 МиБ; счётчики LB `wretr`/`wredis`/`econ`/`eresp`/`hrsp_5xx` — 0. Обнаружение ≤1,5 с без допуска (на `e00eb6c` было 1.515 с — в пределах допуска замера 0,25 с на docker CLI и опрос, см. `make detection`). Один прогон на реплику: критерий бинарный (0 ошибок), а остановки повторены в failover-тестах (`failover-*.txt`, `clean-clone.txt`) и `make test-faults` — неудачных записей нет ни в одном | `evidence/failover-each/summary.json`, `evidence/failover-each/<hostname>/` |
| **4.2** Общая идемпотентность — параллельными запросами с одним ключом | `make lb-check` | 20 раундов × 8: 160 × `201` от двух реплик, 20/20 раундов с одинаковыми телами, одной копией и `409` на другой body; на итоговом коде — то же | `evidence/lb-check.json`, `evidence/clean-clone.txt`, `evidence/track1/after-checks.txt` |
| **4.3** CPU/RAM-лимиты, API без портов в обход LB, секреты и хранилища только где нужно, нет `container_name` | `make limits` (`docker compose --profile bench config` + `docker inspect` против политики в `scripts/limits.py`) на итоговом коде | лимиты у всех 6 сервисов (api 1/512MiB, lb 1/128MiB, postgres 2/1024MiB, valkey 0.5/128MiB, migrate 0.5/256MiB, k6 2/512MiB) и применены у запущенных; порты только у `lb` на `127.0.0.1`; секреты: api — 3, migrate — `database_url`, postgres — пароль, valkey — конфиг, lb и k6 — нет; volumes `pgdata`/`valkeydata` только у своих хранилищ; `backend` internal, k6 только в `edge`; api и lb `read_only`; `PASS`. Подмешанные нарушения (порт и лишний секрет у api, `container_name`, снятый лимит) → 5 нарушений, код 1 | `evidence/limits.txt`, `evidence/limits-violations.txt` |
| **4.2** Общая идемпотентность — параллельными запросами с одним ключом | `make lb-check` | 20 раундов × 8: 160 × `201` от двух реплик, 20/20 раундов с одинаковыми телами, одной копией и `409` на другой body; на коде до SQLAlchemy — то же | `evidence/lb-check.json`, `evidence/clean-clone.txt`, `evidence/track1/after-checks.txt` |
| **4.3** CPU/RAM-лимиты, API без портов в обход LB, секреты и хранилища только где нужно, нет `container_name` | `make limits` (`docker compose --profile bench config` + `docker inspect` против политики в `scripts/limits.py`) на коде до SQLAlchemy | лимиты у всех 6 сервисов (api 1/512MiB, lb 1/128MiB, postgres 2/1024MiB, valkey 0.5/128MiB, migrate 0.5/256MiB, k6 2/512MiB) и применены у запущенных; порты только у `lb` на `127.0.0.1`; секреты: api — 3, migrate — `database_url`, postgres — пароль, valkey — конфиг, lb и k6 — нет; volumes `pgdata`/`valkeydata` только у своих хранилищ; `backend` internal, k6 только в `edge`; api и lb `read_only`; `PASS`. Подмешанные нарушения (порт и лишний секрет у api, `container_name`, снятый лимит) → 5 нарушений, код 1 | `evidence/limits.txt`, `evidence/limits-violations.txt` |
| **4.4** Rolling update под нагрузкой | `make rolling-update FROM_REV=8d28d45` (стенд на образе уровня «3» с тегом `mtusi-messenger:8d28d45`, затем замена на текущую версию с запасом +1) | `lb_up_min` 2 из 2, k6 100 rps, 8996 запросов, ошибок 0 (5 итераций k6 сброшены), зонд 913/0; после замены отвечают только новые контейнеры (`3e741644dba4`, `3e62ff0322c6` → `6c2a02267340`, `158dfc1bd95d`; в `action.txt` у каждой замены — тег и ID образа: `mtusi-messenger:8d28d45@75eeba4b5bfd` → `mtusi-messenger:mtusi2026lab3@c69a721bc974`); база 16 МБ / 15 139 сообщений, реплики по 20 % CPU и 145 МиБ; старые реплики без окна дали `wredis` 56 — запросы, перенаправленные LB на соседа | `evidence/rolling-from-8d28d45/result.json`, `action.txt` |
| **4.4** То же на текущей версии | `make rolling-update` | `lb_up_min` 2, 9001 запрос, ошибок 0, зонд 919/0, все реплики новые (`6c2a02267340`, `158dfc1bd95d` → `c2f5d82dee7c`, `65d10d346f4e`); все счётчики LB 0. Образ пересобран из той же ревизии, тег тот же, ID другой (`mtusi-messenger:mtusi2026lab3@c69a721bc974` → `@021faac1e94a`): BuildKit пишет при сборке новый манифест с аттестацией (`exporting attestation manifest` в выводе сборки `clean-clone.txt`) — это эквивалентная поочерёдная замена | `evidence/rolling/result.json`, `action.txt` |
| **4.4** Миграции однократно и совместимы с работающей версией | `scripts/rolling-update.sh`; `make storage-evidence` | `migrate` запускается один раз до замены первой реплики (`migration.completed up to date`), реплики схему не трогают, `migrate` под `pg_advisory_lock`; между уровнями «3» и «4» схема не менялась; `0002_idempotency_keys` только добавляет таблицу, код лабы 2 её не замечает | `evidence/rolling*/action.txt`, `evidence/migrations.txt` |
**Трек 1 «Цена масштабирования».** Подробности, таблицы и выводы — в разделе трека ниже; поля CSV —
**Трек 1 «Цена масштабирования» — исторические результаты до SQLAlchemy.** Подробности, таблицы и выводы — в разделе трека ниже; поля CSV —
`evidence/track1/README.md`.
| Критерий трека | Команда/сценарий | Наблюдаемый результат | Файл доказательства |
@@ -357,40 +361,35 @@ postgres 2/1g, valkey 0.5/128m, k6 2/512m (`make limits` сверяет их и
| Saturation point БД/LB/пула и почему реплики перестают помогать | метрики каждого прогона: `docker stats`, HAProxy CSV, `pg_stat_activity`, `pg_stat_statements` | на 8×1: API 473 из 800 %, LB 40 % ядра, PostgreSQL 178 из 200 %, **47,5 из 64 соединений ждут блокировку строки чата**, 6,8 — `idle in transaction`, `SELECT … FOR UPDATE` чата — ≈14,1 мс в среднем (13,6–14,4) и 98,7 % времени топ-20 операторов. Контроль (`make track1-control`, 3 повтора): `maxconn` LB 16/32/64 — пик 4 526 / 4 677 / 4 525 rps, интервалы перекрываются (LB не ограничивает); пул 4/8/16 на воркер — ≥5 358 (пул 4 при предложенных 5 400 rps в двух повторах из трёх не насыщен) / 4 677 / 3 789 rps при 14,7 / 47 / 102 ждущих блокировку (пул не мал, а лишние соединения только добавляют конкурентов); 8×0,5 на CPU 4×1 — пик 5 525 против 5 928 (число процессов, а не другие ядра) | `evidence/track1/series-b/summary.csv`, `series-b/base-8x1_rate5400_rep*/pg_statements.csv`, `plots/utilisation.png`, `track1/control-{pool,cpus}/summary.csv`, `plots/capacity.md` |
| Графики и сырые данные | `make plots` | RPS и p95/p99 от нагрузки, CPU по компонентам, пик от CPU с USL, загрузка звеньев на пике, сводка потолков; сырьё каждого прогона — k6, `docker stats`, HAProxy CSV, `pg_stat_activity`, `pg_stat_statements` | `evidence/track1/plots/`, `evidence/track1/<серия>/<прогон>/` |
| Одно подтверждённое улучшение (до/после при тех же ресурсах) | `make track1-compare` (8×1, образ `edc091d` против текущего, чередование по повторам) | запись сообщения одной командой: при 3 600 rps ждут блокировку 12,8 → 0,15 соединения, `idle in transaction` 4,5 → 0, CPU на запрос API −14 %, PostgreSQL −26 %, p95 64,5 → 3,7 мс (у «до» больше чужой нагрузки на VM; в повторе 1 при равной — 35,7 → 5,4 мс); пик 4 252 → 4 894 rps (+15 %), интервалы повторов не пересекаются | `evidence/track1/compare/summary.csv`, `plots/compare-*.png` |
| Улучшение не ломает уровни «3» и «4» | сразу после улучшения: `make student-test`, `make test`, 20 гонок ключа, `make test-failover`, `make test-persistence`; на итоговом коде `e049c26` — весь уровень «3», `make retry-check`, `make test-faults` и `make level4` под k6 | после улучшения: 240 passed, smoke `PASS`, 160 × `201`, failover 131 запись / 0 ошибок, persistence `PASS`; на итоговом коде — 243 passed, 12 тестов стенда, `retry-check` и все строки 3.x и 4.x выше (`detection` ×3, `failover-each`, оба rolling update — 0 ошибок под 100 rps), чистый clone | `evidence/track1/after-checks.txt`, `evidence/clean-clone.txt`, файлы строк 3.x–4.x |
| Улучшение не ломает уровни «3» и «4» | сразу после улучшения: `make student-test`, `make test`, 20 гонок ключа, `make test-failover`, `make test-persistence`; на коде до SQLAlchemy `e049c26` — весь уровень «3», `make retry-check`, `make test-faults` и `make level4` под k6 | после улучшения: 240 passed, smoke `PASS`, 160 × `201`, failover 131 запись / 0 ошибок, persistence `PASS`; на коде до SQLAlchemy — 243 passed, 12 тестов стенда, `retry-check` и все строки 3.x и 4.x выше (`detection` ×3, `failover-each`, оба rolling update — 0 ошибок под 100 rps), чистый clone | `evidence/track1/after-checks.txt`, `evidence/clean-clone.txt`, исторические версии файлов строк 3.x–4.x |
## Эксперименты и отказы
Стенд: 2 реплики × (1 CPU, 512 MiB, 2 воркера), PostgreSQL 2 CPU / 1 GiB, HAProxy 1 CPU / 128 MiB, Valkey
0.5 CPU / 128 MiB, k6 2 CPU / 512 MiB; Docker Desktop на Apple M4 Max. Нагрузка в failover-тесте — один клиент,
`POST` каждые 0.1 с в течение 15 с, таймаут 2 с, повтор после ошибки с тем же ключом; в строках уровня «4» —
k6 100 rps плюс зонд (см. выше). Данные синтетические: каждый прогон создаёт своих пользователей и чаты; стенд
перед записью доказательств очищен (`make reset-data`), к rolling update база выросла до 16–21 МБ и 15–24 тыс.
сообщений, а к концу всех прогонов в ней 120 пользователей и 30 748 сообщений (`migrations.txt`). Размер базы и
`docker stats` стенда во время действия — в `action.txt` прогонов `failover-each` и `rolling*`. Повторы: `detection` —
три прогона на вид отказа, остальные сценарии — по одному: критерий у них бинарный (0 ошибок, одна копия), а
остановка реплики под записью повторена ещё четыре раза (`failover-*.txt` и два прогона в `clean-clone.txt`) и в
`make test-faults`, всегда без неудачных записей.
Текущий уровень «3», код `0a1f48b`; все числа ниже взяты из указанных файлов.
| Воздействие | Что ожидаем | Что наблюдали | Время восстановления / потеря данных |
| Сценарий | Наблюдение | Сохранность и возврат | Evidence |
| --- | --- | --- | --- |
| stop api#1 (`stop-one.sh`, `ff81f93e8b0d`) | запись продолжается ≤10 с, target больше не отвечает | 0 неудачных попыток, 132 записи; после теста `ff81f93e8b0d` `exited`, `fe75c6c37e5a` `running` (`failover-ff81f93e8b0d.txt`) | первая запись после хука через 2.858 с от его старта (хук ≈2,7 с из-за окна вывода; запись не прерывалась); потерь и дублей нет |
| stop api#2 (после `restore` и одного запроса через LB — `SHIFT=1`, `fe75c6c37e5a`) | то же для второй реплики | 0 неудачных попыток, 136 записей; `fe75c6c37e5a` `exited` (`failover-fe75c6c37e5a.txt`) | 2.682 с; потерь и дублей нет |
| Полный restart (`restart.sh`: lb, api ×2, postgres, valkey) | прежний токен работает, история побайтно та же | persistence `PASS`; ID контейнеров прежние, `StartedAt` всех обновился: postgres и valkey — 02:45:49, lb — 02:45:50, api — 02:45:51 при старте прогона в 02:45:46 (`persistence.txt`) | потерь нет; в чистом clone — то же (`clean-clone.txt`) |
| Конкурентный одинаковый ключ (20 раундов × 8 POST через LB) | в каждом раунде одно сообщение, все ответы равны | 160 × `201`, 80 + 80 по репликам, 20/20 раундов с 1 копией, другой body → `409` (`lb-check.json`) | дублей нет |
| Потерянный ответ: запись ждёт блокировку строки чата 1,5 с, клиент сдаётся через 0,5 с и повторяет тот же ключ через LB (`make retry-check`) | повтор `201` с тем же `Message`, одна копия | реплика жива: она сама ответила на первую попытку `201`, повтор через 1,52 с от другой реплики — тот же `id`; реплику убили, пока запрос ждал: повтор от соседа — тот же `id`, сообщение записала первая попытка (`retry.json`) | дублей и потерь нет; повтор прошёл с первой попытки |
| Все реплики остановлены | LB отвечает `503` в формате контракта | `503 {"error":{"code":"unavailable",…,"request_id":"no-replica-1"}}` (`hooks.txt`) | после `make restore` — `200` |
| `docker compose stop postgres` | реплики выходят из ротации, ответы `503`, а не `500` | `503` за ≤0.014 с на ready, me, login, register; live внутри реплики `200`; LB исключил обе реплики через 1.04 с (`faults.txt`) и 1.26–1.27 с (`detection/run*/postgres.json`) и отвечает `503` сам | после `start` готовность через 2.1 с без рестарта API; в ротации через 2.42–2.48 с |
| `docker compose stop valkey` | проверка сессий через PostgreSQL, без анонимного доступа | действующий токен `200`, неизвестный `401`, выход `503` (`faults.txt`) | после `start` выход `204` |
| Повторный `migrate` | схема и данные не меняются | `up to date`, счётчики равны (`migrations.txt`, `clean-clone.txt`) | — |
| `SIGTERM` реплике (`docker stop -t 7`) | LB исключает её раньше, чем она закроет порт | исключена через 1.26–1.35 с, остановка завершилась через 2.47–2.56 с (`detection/run*/sigterm.json`); код выхода 0 (`hooks.txt`), в логе — `service.draining` (окно 2 с) и readiness `503` (`failover-*.txt`) | возврат после `restore` 2.51–3.56 с |
| Процесс реплики убит (`docker kill`) | исключение ≤1,5 с | 0.42–0.53 с (`detection/run*/kill.json`) | `restore` 2.99–3.04 с |
| Процесс реплики завис (`docker pause`) | исключение ≤3,5 с по таймауту проверки | 2.93–3.06 с; через LB — `200` от соседа (`detection/run*/pause.json`) | после `unpause` 2.35–2.37 с |
| Поочерёдная остановка каждой реплики под 100 rps | 0 ошибок, запись не прерывается, реплика возвращается | обе реплики: k6 0 ошибок из 6001 и 6001, зонд 0 из 646 и 646, p99 7.3 и 6.2 мс, повторов LB 0 (`failover-each/summary.json`) | обнаружение 0.86–1.41 с; снова в ротации через 14.34–14.83 с от начала действия (хук + 10 с без реплики + `restore`) |
| Rolling update с уровня «3» под 100 rps | ёмкость не ниже 2, 0 ошибок, после — только новые реплики | `lb_up_min` 2, 0 ошибок из 8996, зонд 0 из 913; старые реплики без окна: `wredis` 56 | замена двух реплик за 7.451 с |
| Rolling update текущей версии под 100 rps | то же, и без повторов LB | `lb_up_min` 2, 0 ошибок из 9001, зонд 0 из 919, все счётчики LB 0 | 12.620 с |
| Остановка api-1 | 129 записей, 0 ошибок; первая запись после хука через 2.762 с | История без дублей, api-2 работает, api-1 Exited (0), затем восстановлена | `failover-current-1.txt`, `grade3-restore-1.txt` |
| Остановка api-2 | 128 записей, 0 ошибок; первая запись после хука через 2.817 с | История без дублей, api-1 работает, api-2 Exited (0), затем восстановлена | `failover-current-2.txt`, `grade3-restore-2.txt` |
| Потерянный ответ и kill | Таймаут клиента 0.5 с при блокировке чата 1.5 с; повтор через соседа 201 | Одна копия, одинаковый ID; оба варианта pass | `retry.json`, `grade3-retry.txt` |
| Полный restart | StartedAt всех сервисов обновились, IDs прежние | Старая сессия и история сохранились | `persistence.txt` |
| PostgreSQL остановлен | 503 за ≤0.014 с, live внутри API 200; LB исключил реплики ещё через 0.86 с | После запуска ready через 2.0 с; 40 регистраций через 2 реплики без рестарта API | `faults.txt` |
| Valkey остановлен | Живой токен 200, неизвестный 401; logout 503 | После запуска logout 204; рестарт Valkey сохраняет отзыв | `faults.txt` |
| Повтор Alembic | Код 0, head не меняется | Все счётчики строк до и после равны | `migrations.txt`, `grade3-storage.txt` |
### Трек 5 — трек 1 «Цена масштабирования»
Первый прогон не был успешным: `grade3-faults.txt` содержит 11 passed / 1 failed — регистрация получила
503 после возврата PostgreSQL. `grade3-pool-regression-before.txt` воспроизводит закрытое простаивающее
соединение; `pool_pre_ping` устранил ошибку (`grade3-pool-regression-after.txt`, итоговый `student-tests.txt`).
Полный набор также был прерван на коллизии порта тестового gunicorn с LB (46 passed,
`grade3-student-tests-interrupted.txt`), затем упал при старте тестовой БД (70 passed / 201 errors,
полный обезличенный вывод сжат в `grade3-student-tests-startup.txt.gz`). Исправлены изоляция порта,
дедлайн ожидания и повтор временного SQLSTATE 57P03. После исправлений итоговые 271 собственный
и 12 стендовых тестов прошли. Публичные проверки не менялись.
### Трек 5 — трек 1 «Цена масштабирования» (исторические замеры)
Все числа этого раздела получены до SQLAlchemy и `pool_pre_ping`. Новые серии относятся к следующему
этапу; до их завершения эти результаты не являются доказательством «5» для текущего кода.
**Гипотезы** (записаны в предложении до первого прогона). H1: при фиксированном бюджете API 4 CPU / 2 GiB
конфигурации 1×4, 2×2 и 4×1 дают одинаковый потолок в пределах ±15 %: упор — суммарный CPU интерпретатора, а
@@ -562,7 +561,7 @@ CPU и вдвое больший p95 ниже колена. Значит, рет
(ожидания `LWLock`, почти все — `WALWrite`, 8,5–9,2 против 1,9–2,3 «до»; `pg_activity.csv`), а CPU PostgreSQL —
89 %. Нижние значения варианта «после» за коленом (4 494 и 4 618 rps) — как раз возмущённые прогоны (см.
методику): вывод они не усиливают, а ослабляют. Проверки уровней «3» и «4» на новом коде проходят
(`after-checks.txt`, `clean-clone.txt`), а на итоговом коде повторён весь уровень «4» под k6 (строки 4.x).
(`after-checks.txt`, `clean-clone.txt`), а на коде до SQLAlchemy повторён весь уровень «4» под k6 (строки 4.x).
**Выводы.**
@@ -636,7 +635,7 @@ round robin, `retry-on conn-failure` и `redispatch`. Пример — оста
**Какие POST можно повторять после timeout и что защищает Idempotency-Key?** Только `POST
/api/v1/chats/{chat_id}/messages` с тем же `Idempotency-Key` и тем же телом. Сообщение и квитанция ключа
фиксируются одной командой, поэтому повтор после таймаута, обрыва или гибели реплики посреди запроса либо
фиксируются одной транзакцией, поэтому повтор после таймаута, обрыва или гибели реплики посреди запроса либо
находит квитанцию и получает тот же `201` с тем же `Message`, либо, если исходная запись не зафиксировалась,
создаёт сообщение один раз. Одновременные повторы через разные реплики сериализуются блокировкой строки чата:
160 × `201` и одна копия в каждом из 20 раундов (`lb-check.json`). Потерянный ответ воспроизведён на стенде
@@ -662,23 +661,26 @@ persistence с прежним токеном падают. Sticky-сессии
## Ограничения и следующие шаги
Следующий этап — уровень «4», затем повторный трек «Цена масштабирования» на SQLAlchemy.
Числа обнаружения отказов, rolling update и улучшения трека в списке ниже относятся к историческим прогонам.
- Один Docker-host: потеря host, LB или PostgreSQL — отказ всего стенда. LB и БД — единственные точки отказа;
их резервирование вне рамок лабы.
- Цель failover-теста выбирает round robin (кто обслужил первое сообщение); второй прогон сразу после первого
и `make restore` попадает в ту же реплику, поэтому перед ним нужен один запрос через LB:
`make failover-evidence SHIFT=1` или `curl -s -o /dev/null "http://$(docker compose port lb 8080)/health/live"`
перед `make test-failover` (так сняты `failover-fe75c6c37e5a.txt` и второй failover в `clean-clone.txt`).
перед `make test-failover` (так снят `failover-current-2.txt`).
- `X-Instance-Id` раскрывает короткий ID контейнера — допустимо до лабы 7, где появится непрозрачный alias.
- Таблица ключей растёт вместе с историей (строка на сообщение); истёкшие ключи только перезаписываются при
повторном использовании, фоновой очистки нет.
- Запись в один горячий чат сериализуется блокировкой строки чата; повтор с ключом берёт ту же блокировку.
После трека 1 блокировка держится одну команду SQL, но фиксация (сброс WAL) остаётся внутри неё — это
В SQLAlchemy блокировка держится до явного COMMIT после одного изменяющего SQL-оператора — это
следующий потолок для горячих чатов (раздел трека).
- Окно вывода из ротации удлиняет каждую остановку реплики на 2 с; оно рассчитано на проверки LB раз в
секунду: при большем `inter` окно нужно увеличить (это ловит `test_timeouts.py`).
- Время обнаружения измерено тремя прогонами на сценарий; верхняя граница — формула по параметрам проверки.
Замер считается от запуска команды отказа и включает задержку docker CLI и период опроса статистики LB, поэтому
может превысить формулу на эту величину; допуск замера — 0,25 с. На итоговом коде все замеры в пределах
может превысить формулу на эту величину; допуск замера — 0,25 с. На коде до SQLAlchemy все замеры в пределах
формулы, раньше превышение в пределах допуска было у PostgreSQL (1,553 с), `SIGTERM` (1,609 и 1,515 с).
- Rolling update проверен со сменой кода без смены схемы. Миграция, несовместимая с работающей версией
(удаление или переименование столбца), потребовала бы двух выпусков expand/contract; в лабе таких нет.
+53 -28
View File
@@ -1,35 +1,60 @@
# Доказательства
Обезличенные результаты прогонов лабы 3. Пользователи, чаты и тексты синтетические; паролей, токенов, `.env`,
содержимого `secrets/` и дампов здесь нет. В первой строке каждого отчёта `*.txt` в `evidence/` и `track1/` — дата
(UTC) и коммит прогона. У `lb-check.json`, `retry.json` и у сырья в каталогах прогонов (`detection/`, `failover-each/`, `rolling*/`,
`track1/<серия>/`: JSON, CSV, `action.txt`, `k6/k6.txt`) даты и коммита внутри нет: коммит — в столбце «Коммит»
таблиц ниже, время — в `started` строк `summary.csv` трека и в метках времени `action.txt`. Проверки через
балансировщик шли на порт 18083 (`LB_HTTP_PORT`; 8080 на машине был занят стендами других лаб): цели `make` берут `BASE_URL` из
`docker compose port lb 8080`. Hostname реплики = `X-Instance-Id`; ID контейнеров меняются между прогонами.
Обезличенные реальные прогоны; пользователи, сообщения и пароли тестов синтетические. Токены,
содержимое secrets и дампы не сохраняются. В первой строке текстовых логов — UTC и SHA;
`grade3-*.txt` также содержат команду, окружение, код завершения и длительность.
В сохранённом текстовом выводе удалены только пробелы на концах строк Docker/psql; локальный путь заменён на `<repo>`.
## Уровень «3» и перенос лабы 2
## Уровень «3» после SQLAlchemy — 2026-11-05
| Файл | Что доказывает | Команда | Коммит |
| --- | --- | --- | --- |
| `clean-clone.txt` | запуск из свежего clone на пустых volumes: секреты, `config`, `make up` с миграциями `0001`/`0002` и ожиданием всех реплик в LB, smoke, `lb-check`, `retry-check`, failover обеих реплик, persistence (всё без явного `BASE_URL` при `LB_HTTP_PORT=18083`), повтор миграций, `storage-evidence` в клоне, `make down` (volumes остаются), `make reset-data` (volumes удалены) | команды блока «Запуск из чистого clone» `REPORT.md` дословно, между ними — наблюдения (`docker compose ps`, статистика LB, `docker volume ls`) | `e049c26` |
| `checks.txt` | реальный вывод `make check`, `make validate` (`openapi-spec-validator` из dev-группы `.venv`) и `make lint`; `git diff --stat upstream/main` контракта, публичных тестов и задания (пусто) и `.github` (только свой CI job) | команды внутри файла | `e049c26` |
| `smoke.txt` | публичный smoke через LB | `make test` | `e049c26` |
| `stack.txt` | сервисы, только `lb` публикует порты, `container_name` 0, `docker port` реплик пуст, hostname ↔ `X-Instance-Id`, лимиты, сети, uid, взгляд LB | `make stack-evidence` | `e049c26` |
| `environment.txt` | host, Docker, образы по digest, версии пакетов, uid процессов | `make stack-evidence` | `e049c26` |
| `lb-check.json` | 40 `GET /users/me` одним токеном — 20 + 20 по двум репликам; 20 раундов × 8 параллельных POST с одним ключом — 160 × `201`, одна копия, `409` на другой body | `make lb-check` | `e049c26` |
| `retry.json` | потерянный ответ: запись ждёт блокировку строки чата дольше таймаута клиента, повтор с тем же ключом через LB — на живой реплике и после `docker kill` реплики, чей запрос ждёт; `201`, одна копия с тем же `id`, кто записал сообщение, ответила ли реплика без клиента | `make retry-check` | `e049c26` |
| `failover-fe75c6c37e5a.txt`, `failover-ff81f93e8b0d.txt` | `make test-failover ACTION_SCRIPT=scripts/stop-one.sh` для каждой реплики: `docker inspect` до/после, остановлен именно target, лог его остановки, `restore` | `make failover-evidence`, затем `make failover-evidence SHIFT=1` | `e049c26` |
| `hooks.txt` | `stop-one.sh`: длительность, код, остановлен только target; неизвестный ID → 3; без переменной → 1; все реплики остановлены → `503` LB в формате контракта | команды внутри файла | `e049c26` |
| `persistence.txt` | `make test-persistence ACTION_SCRIPT=scripts/restart.sh` и `StartedAt` всех контейнеров до и после | `make persistence-evidence` | `e049c26` |
| `faults.txt` | тесты стенда лабы 2 через LB: гонка регистрации, остановка Valkey и PostgreSQL, рестарт API, полный рестарт с выходом, срок сессии после рестарта | `make faults-evidence` | `e049c26` |
| `student-tests.txt` | все собственные тесты по именам (идемпотентность, `X-Instance-Id`, сессии, конвейер) и вывод теста `SIGTERM`-окна и цепочки таймаутов | `PYTEST_ADDOPTS=-vv make student-test`; `pytest -s` двух файлов | `e049c26` |
| `schema.txt` | `\d+` всех таблиц и применённые миграции | `make storage-evidence` | `e049c26` |
| `migrations.txt` | повторный `migrate` → `up to date`, счётчики строк до и после равны | `make storage-evidence` | `e049c26` |
| `kdf.txt` | Argon2id у всех пользователей, в `sessions` только 32-байтовые SHA-256 | `make storage-evidence` | `e049c26` |
| `secrets.txt` | секреты, `.env`, дампы и volumes не в Git и игнорируются | `make storage-evidence` | `e049c26` |
Код всех итоговых прогонов: **`0a1f48bd73e5780c732356880c23fdb476bcff98`**.
Compose-проект `mtusi2026lab3-grade3-final-20261105`, `LB_HTTP_PORT=18083`, `LB_STATS_PORT=23083`,
`API_REPLICAS=2`; BASE_URL автоматически определяется по порту LB. Обе реплики:
api-1 `8ffe0c70f4ea`, api-2 `1b4a73f61b07`. После прогонов контейнеры остановлены,
volumes сохранены. Код приложения после этого SHA не менялся; далее — документация и архив OpenSpec.
## Уровень «4»
| Файл | Команда | Результат |
| --- | --- | --- |
| `grade3-start.txt` | `make up`, `docker compose ps -a`, чтение `alembic_version` | Новый проект без прежних volumes, сборка успешна, 2 healthy API, one-shot Alembic вышел с 0, head `0002_idempotency_keys` |
| `checks.txt` | `make check`, `make validate`, `make lint`, `uv lock --check`, `openspec validate --all --strict`, diff против upstream | Все успешно; нормативные файлы не менялись |
| `smoke.txt` | `make test` | Публичный smoke PASS |
| `stack.txt`, `environment.txt`, `grade3-stack.txt` | `make stack-evidence` | Порты только у LB, реальные контейнеры и hostname, 2 UP, общие PostgreSQL/Valkey, uid, версии библиотек |
| `lb-check.json`, `grade3-lb-check.txt` | `make lb-check` | Один токен 20 + 20 GET; 20 × 8 POST, 160 ответов 201, по одной копии, 20 конфликтов другого body; pass |
| `retry.json`, `grade3-retry.txt` | `make retry-check` | Потерянный ответ при живой/убитой реплике, повтор через соседа 201, одна копия; pass |
| `failover-current-1.txt`, `failover-current-2.txt` | `make test-failover ACTION_SCRIPT=scripts/stop-one.sh` и `docker compose ps -a` | По очереди api-1 и api-2 Exited (0); 129/128 записей, 0/0 ошибок, восстановление 2.762/2.817 с |
| `grade3-restore-1.txt`, `grade3-restore-2.txt` | `make restore` | Остановленные реплики возвращены в ротацию |
| `persistence.txt`, `grade3-persistence.txt` | `make persistence-evidence` → публичный `make test-persistence ACTION_SCRIPT=scripts/restart.sh` | PASS, IDs прежние, StartedAt всех сервисов обновились, токен и история сохранились |
| `faults.txt` | `make test-faults` | 12 passed; после PostgreSQL 40 регистраций через 2 реплики без рестарта API |
| `student-tests.txt` | `make student-test PYTEST_ARGS=-vv` | 271 passed, 12 deselected; стендовые 12 запущены отдельно |
| `schema.txt`, `migrations.txt`, `grade3-storage.txt` | `make storage-evidence` | Схема Alembic, повтор без изменения 70 users / 24 sessions / 6 chats / 12 members / 284 messages / 284 keys / 1 version |
| `kdf.txt`, `secrets.txt` | `make storage-evidence` | Argon2id, хеши токенов 32 байта; секреты/.env вне Git |
| `grade3-final-review.txt` | Финальные проверки после обновления отчёта и архива | check/validate/lint/OpenSpec, diff нормативных и исполняемых файлов, отсутствие контейнеров этапа |
| `grade3-stop.txt` | `make down`, `docker compose ps -a`, volumes проектов | Контейнеров нет, volumes обоих прогонов сохранены |
Дата и полный SHA JSON-файлов `lb-check.json` и `retry.json` находятся в соответствующих
`grade3-lb-check.txt` и `grade3-retry.txt`, которые содержат тот же вывод JSON.
## Неуспешные промежуточные прогоны
Они сохранены отдельно, не выдаются за итоговые PASS.
| Файл | Код / состояние | Наблюдение и исправление |
| --- | --- | --- |
| `grade3-faults.txt` | `7fc911c332aefe33285ea9e7811c37abd9bb20a6` | 11 passed / 1 failed: POST users → 503 после PostgreSQL; включён `pool_pre_ping` |
| `grade3-pool-regression-before.txt` | `18de595` + новый тест (приложение прежнее) | Первый POST после `pg_terminate_backend` → 503 вместо 201 |
| `grade3-pool-regression-after.txt` | `18de595` + исправления до коммита `0a1f48b` | 2 passed: закрытое соединение и SIGTERM; затем полный набор проверен на `0a1f48b` |
| `grade3-student-tests-interrupted.txt` | `7fc911c` | 46 passed, затем прерывание: gunicorn теста использовал порт LB 18083; теперь свободный 23000–23999 и дедлайн |
| `grade3-student-tests-startup.txt.gz` | `18de595` + исправления до `0a1f48b` | Полный обезличенный вывод: 70 passed / 201 errors, SQLSTATE 57P03 при старте fixture БД; временный отказ теперь повторяется до дедлайна |
| `grade3-whitespace-before.txt` | `0a1f48b` + evidence/OpenSpec | `git diff --check` нашёл пробелы в конце строк Docker/psql; после нормализации итоговая проверка прошла |
| `grade3-initial-stop.txt` | `18de595` + WIP | Остановка исходного проекта без удаления его volumes перед итоговым прогоном |
`clean-clone.txt`, `hooks.txt`, `failover-fe75c6c37e5a.txt`, `failover-ff81f93e8b0d.txt`
и данные уровня «4»/трека ниже — **история до SQLAlchemy**, с собственными датами и SHA.
Исторические версии перезаписанных файлов доступны через `git show 7fc911c:evidence/<имя>`.
Они не подтверждают актуальную производительность. Уровень «4», затем трек «Цена масштабирования»
перегенерируются следующими последовательными этапами; исходный change остаётся активным.
## Уровень «4» — исторические результаты до SQLAlchemy
| Файл | Что доказывает | Команда | Коммит |
| --- | --- | --- | --- |
@@ -40,7 +65,7 @@
| `rolling-from-8d28d45/` | rolling update с образа уровня «3» (`mtusi-messenger:8d28d45`) на текущий под k6: ёмкость, ошибки, замена всех реплик, `migrate` один раз; в `action.txt` — тег и ID образа каждой заменяемой и новой реплики, размер БД и `docker stats` | `make rolling-update FROM_REV=8d28d45` | `e049c26` |
| `rolling/` | rolling update текущей сборкой под k6 | `make rolling-update` | `e049c26` |
## Трек 1 «Цена масштабирования»
## Трек 1 «Цена масштабирования» — исторические результаты до SQLAlchemy
`track1/` — серии A и B, сравнение до/после, контрольные прогоны, графики и проверки после улучшения; состав и поля CSV —
`track1/README.md`.
+28 -17
View File
@@ -1,23 +1,34 @@
date: 2026-10-30T02:44:16Z commit: e049c26
$ make check
date: 2026-11-05T18:56:09.780488+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'set -e; make check; make validate; make lint; uv lock --check; openspec validate --all --strict; git diff --exit-code upstream/main -- contracts tests README.md COURSE.md lab.json MAINTAINERS.md'
python3 scripts/check_contract.py
PASS: offline skeleton structure, local refs and Python syntax; application NOT tested.
exit=0
$ make validate # .venv из make install: openapi-spec-validator в dev-группе
.venv/bin/python scripts/validate_openapi.py
PASS: full OpenAPI 3.1 and JSON Schema validation; application NOT tested.
exit=0
$ make lint
.venv/bin/ruff check src student-tests scripts/probe.py scripts/limits.py scripts/scaling.py tools
.venv/bin/ruff check src student-tests alembic scripts/probe.py scripts/limits.py scripts/scaling.py tools
All checks passed!
.venv/bin/ruff format --check src student-tests scripts/probe.py scripts/limits.py scripts/scaling.py tools
104 files already formatted
.venv/bin/ty check src student-tests
.venv/bin/ruff format --check src student-tests alembic scripts/probe.py scripts/limits.py scripts/scaling.py tools
107 files already formatted
.venv/bin/ty check src student-tests alembic
All checks passed!
exit=0
$ git diff --stat upstream/main -- contracts tests README.md COURSE.md lab.json MAINTAINERS.md # контракт, публичные тесты и задание не изменены: вывод пуст
exit=0
$ git diff --stat upstream/main -- .github # шаблон PR не изменён, добавлен только собственный CI job
.github/workflows/application.yml | 82 +++++++++++++++++++++++++++++++++++++++
1 file changed, 82 insertions(+)
exit=0
Resolved 64 packages in 14ms
- Validating...
✓ change/2026-11-05-adopt-sqlalchemy-alembic
✓ change/fix-lab3-postgres-pool-recovery
✓ spec/lab1-event-publication
✓ spec/lab1-messenger-chats
✓ spec/lab1-messenger-history
✓ spec/lab1-messenger-identity
✓ spec/lab1-service-operability
✓ spec/lab2-auth-sessions
✓ spec/lab2-dependency-failures
✓ spec/lab2-history-index
✓ spec/lab2-persistent-storage
✓ spec/lab2-session-cache
✓ spec/lab3-failover-operations
✓ spec/lab3-idempotent-messages
✓ spec/lab3-load-balancing
✓ spec/lab3-scaling-cost
Totals: 16 passed, 0 failed (16 items)
exit_code: 0 elapsed_seconds: 1.458
+3 -1
View File
@@ -1,4 +1,4 @@
date: 2026-10-30T02:45:02Z commit: e049c26
date: 2026-11-05T18:59:00Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
host: Apple M4 Max, 16 CPU, 48 GiB RAM, macOS 15.1
docker: 28.3.2, VM: 16 CPU, 8217190400 bytes
compose: 2.38.2-desktop.1
@@ -18,6 +18,8 @@ packages (uv.lock):
uvicorn 0.54.0
uvicorn-worker 0.4.0
gunicorn 26.2.0
sqlalchemy 2.0.45
alembic 1.16.5
asyncpg 0.32.0
argon2-cffi 25.1.0
pydantic 2.13.5
+23
View File
@@ -0,0 +1,23 @@
date: 2026-11-05T18:58:02.224418+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'docker compose ps -a; make test-failover ACTION_SCRIPT=scripts/stop-one.sh; result=$?; docker compose ps -a; exit "$result"'
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
mtusi2026lab3-grade3-final-20261105-api-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Up 3 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-api-2 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Up About a minute (healthy)
mtusi2026lab3-grade3-final-20261105-lb-1 haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b "docker-entrypoint.s…" lb 2 minutes ago Up About a minute (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
mtusi2026lab3-grade3-final-20261105-migrate-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "alembic upgrade head" migrate 2 minutes ago Exited (0) About a minute ago
mtusi2026lab3-grade3-final-20261105-postgres-1 postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b "docker-entrypoint.s…" postgres 2 minutes ago Up About a minute (healthy)
mtusi2026lab3-grade3-final-20261105-valkey-1 valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a "tini -- docker-entr…" valkey 2 minutes ago Up About a minute (healthy)
python3 tests/resilience.py --mode failover --action-script "scripts/stop-one.sh" --base-url "http://127.0.0.1:18083"
Executing explicit failover hook; hook output suppressed to avoid leaking secrets.
{"observed_instances_before": 2, "successful_writes": 129, "failed_attempts": 0, "first_recovery_seconds": 2.762}
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
mtusi2026lab3-grade3-final-20261105-api-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Exited (0) 12 seconds ago
mtusi2026lab3-grade3-final-20261105-api-2 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Up 2 minutes (healthy)
mtusi2026lab3-grade3-final-20261105-lb-1 haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b "docker-entrypoint.s…" lb 2 minutes ago Up 2 minutes (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
mtusi2026lab3-grade3-final-20261105-migrate-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "alembic upgrade head" migrate 2 minutes ago Exited (0) 2 minutes ago
mtusi2026lab3-grade3-final-20261105-postgres-1 postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b "docker-entrypoint.s…" postgres 2 minutes ago Up 2 minutes (healthy)
mtusi2026lab3-grade3-final-20261105-valkey-1 valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a "tini -- docker-entr…" valkey 2 minutes ago Up 2 minutes (healthy)
exit_code: 0 elapsed_seconds: 15.820
+23
View File
@@ -0,0 +1,23 @@
date: 2026-11-05T18:58:20.145733+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'curl -fsS -o /dev/null "http://$(docker compose port lb 8080)/health/live"; docker compose ps -a; make test-failover ACTION_SCRIPT=scripts/stop-one.sh; result=$?; docker compose ps -a; exit "$result"'
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
mtusi2026lab3-grade3-final-20261105-api-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Up 2 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-api-2 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 2 minutes ago Up 2 minutes (healthy)
mtusi2026lab3-grade3-final-20261105-lb-1 haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b "docker-entrypoint.s…" lb 2 minutes ago Up 2 minutes (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
mtusi2026lab3-grade3-final-20261105-migrate-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "alembic upgrade head" migrate 2 minutes ago Exited (0) 2 minutes ago
mtusi2026lab3-grade3-final-20261105-postgres-1 postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b "docker-entrypoint.s…" postgres 2 minutes ago Up 2 minutes (healthy)
mtusi2026lab3-grade3-final-20261105-valkey-1 valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a "tini -- docker-entr…" valkey 2 minutes ago Up 2 minutes (healthy)
python3 tests/resilience.py --mode failover --action-script "scripts/stop-one.sh" --base-url "http://127.0.0.1:18083"
Executing explicit failover hook; hook output suppressed to avoid leaking secrets.
{"observed_instances_before": 2, "successful_writes": 128, "failed_attempts": 0, "first_recovery_seconds": 2.817}
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
mtusi2026lab3-grade3-final-20261105-api-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 3 minutes ago Up 17 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-api-2 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 3 minutes ago Exited (0) 12 seconds ago
mtusi2026lab3-grade3-final-20261105-lb-1 haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b "docker-entrypoint.s…" lb 3 minutes ago Up 2 minutes (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
mtusi2026lab3-grade3-final-20261105-migrate-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "alembic upgrade head" migrate 3 minutes ago Exited (0) 2 minutes ago
mtusi2026lab3-grade3-final-20261105-postgres-1 postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b "docker-entrypoint.s…" postgres 3 minutes ago Up 2 minutes (healthy)
mtusi2026lab3-grade3-final-20261105-valkey-1 valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a "tini -- docker-entr…" valkey 3 minutes ago Up 2 minutes (healthy)
exit_code: 0 elapsed_seconds: 15.802
+18 -14
View File
@@ -1,4 +1,5 @@
date: 2026-10-30T02:46:09Z commit: e049c26
date: 2026-11-05T18:55:40.945444+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make test-faults
BASE_URL="http://127.0.0.1:18083" .venv/bin/pytest -m stack -v -s student-tests/stack
============================= test session starts ==============================
@@ -14,19 +15,19 @@ student-tests/stack/test_faults.py::test_registration_race_yields_exactly_one_us
PASSED
student-tests/stack/test_faults.py::test_chat_creation_rolls_back_on_unknown_member чат с несуществующим участником: 400 invalid_request
PASSED
student-tests/stack/test_faults.py::test_wrong_password_and_unknown_user_get_same_basic_challenge неверный пароль: 401 за 0.012 с
неизвестный пользователь: 401 за 0.013 с
student-tests/stack/test_faults.py::test_wrong_password_and_unknown_user_get_same_basic_challenge неверный пароль: 401 за 0.013 с
неизвестный пользователь: 401 за 0.012 с
PASSED
student-tests/stack/test_faults.py::test_logout_then_token_is_dead logout: 204, затем 401, повтор 401
PASSED
student-tests/stack/test_faults.py::test_valkey_serves_repeated_checks 5 проверок токена: keyspace_hits 4 → 9
student-tests/stack/test_faults.py::test_valkey_serves_repeated_checks 5 проверок токена: keyspace_hits 3 → 8
PASSED
student-tests/stack/test_faults.py::test_valkey_stopped_is_bypassed_but_logout_waits valkey остановлен, действующий токен: 200 за 0.004 с
valkey остановлен, неизвестный токен: 401 за 0.003 с
student-tests/stack/test_faults.py::test_valkey_stopped_is_bypassed_but_logout_waits valkey остановлен, действующий токен: 200 за 0.014 с
valkey остановлен, неизвестный токен: 401 за 0.004 с
valkey остановлен: ready 200, вход 201, выход 503
valkey снова запущен: повторный выход 204
PASSED
student-tests/stack/test_faults.py::test_valkey_restart_keeps_cache_and_revocations рестарт valkey: ключей 15 → 15
student-tests/stack/test_faults.py::test_valkey_restart_keeps_cache_and_revocations рестарт valkey: ключей 6 → 6
рестарт valkey: живой 200, отозванный 401
PASSED
student-tests/stack/test_faults.py::test_valkey_flushall_loses_nothing FLUSHALL: живой 200, отозванный 401
@@ -34,18 +35,21 @@ PASSED
student-tests/stack/test_faults.py::test_postgres_stopped_gives_bounded_503_and_recovers postgres остановлен, ready: 503 за 0.004 с
postgres остановлен, me: 503 за 0.003 с
postgres остановлен, stranger: 503 за 0.003 с
postgres остановлен, login: 503 за 0.002 с
postgres остановлен, login: 503 за 0.003 с
postgres остановлен, register: 503 за 0.014 с
live внутри реплики 200; LB исключил все реплики ещё через 1.04 с
live внутри реплики 200; LB исключил все реплики ещё через 0.86 с
live через LB без реплик: 503 за 0.000 с
postgres запущен: готовность через 2.1 с, прежний токен 200
postgres запущен: готовность через 2.0 с, прежний токен 200
postgres запущен: 40 регистраций 201 через 2 реплики без рестарта API
PASSED
student-tests/stack/test_faults.py::test_api_restart_keeps_session_without_extending_it рестарт api: готовность через 2.3 с, токен 200
expires_at при входе 2026-10-30T03:46:23.761174Z, в БД после рестарта 2026-10-30T03:46:23.761174Z
student-tests/stack/test_faults.py::test_api_restart_keeps_session_without_extending_it рестарт api: готовность через 1.5 с, токен 200
expires_at при входе 2026-11-05T19:55:55.410073Z, в БД после рестарта 2026-11-05T19:55:55.410073Z
PASSED
student-tests/stack/test_faults.py::test_full_restart_keeps_session_until_logout restart.sh: готовность через 0.0 с, прежний токен 200, выход 204, затем 401
PASSED
student-tests/stack/test_faults.py::test_session_expires_after_restart_at_original_time срок сессии сокращён до 20 с, рестарт api: готовность через 1.5 с, до срока 200, после срока 401
student-tests/stack/test_faults.py::test_session_expires_after_restart_at_original_time срок сессии сокращён до 20 с, рестарт api: готовность через 2.8 с, до срока 200, после срока 401
PASSED
============================= 12 passed in 48.01s ==============================
============================= 12 passed in 47.62s ==============================
exit_code: 0 elapsed_seconds: 48.183
+35
View File
@@ -0,0 +1,35 @@
date: 2026-11-05T19:06:46.410264+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'set -e; make check; make validate; make lint; openspec validate --all --strict; git diff --check; git diff --exit-code upstream/main -- contracts tests README.md COURSE.md lab.json MAINTAINERS.md; git diff --exit-code 0a1f48bd73e5780c732356880c23fdb476bcff98 -- src student-tests alembic pyproject.toml uv.lock Dockerfile compose.yaml Makefile infra scripts; git diff --exit-code 7fc911c332aefe33285ea9e7811c37abd9bb20a6 -- .pipeline; docker ps -a --filter label=com.docker.compose.project=mtusi2026lab3-grade3-final-20261105; docker ps -a --filter label=com.docker.compose.project=mtusi2026lab3-grade3-20261105; docker ps -a --filter name=mtusi-lab3-test'
python3 scripts/check_contract.py
PASS: offline skeleton structure, local refs and Python syntax; application NOT tested.
.venv/bin/python scripts/validate_openapi.py
PASS: full OpenAPI 3.1 and JSON Schema validation; application NOT tested.
.venv/bin/ruff check src student-tests alembic scripts/probe.py scripts/limits.py scripts/scaling.py tools
All checks passed!
.venv/bin/ruff format --check src student-tests alembic scripts/probe.py scripts/limits.py scripts/scaling.py tools
107 files already formatted
.venv/bin/ty check src student-tests alembic
All checks passed!
- Validating...
✓ change/2026-11-05-adopt-sqlalchemy-alembic
✓ spec/lab1-event-publication
✓ spec/lab1-messenger-chats
✓ spec/lab1-messenger-history
✓ spec/lab1-messenger-identity
✓ spec/lab1-service-operability
✓ spec/lab2-auth-sessions
✓ spec/lab2-dependency-failures
✓ spec/lab2-history-index
✓ spec/lab2-persistent-storage
✓ spec/lab2-session-cache
✓ spec/lab3-failover-operations
✓ spec/lab3-idempotent-messages
✓ spec/lab3-load-balancing
✓ spec/lab3-scaling-cost
Totals: 15 passed, 0 failed (15 items)
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
exit_code: 0 elapsed_seconds: 4.870
+34
View File
@@ -0,0 +1,34 @@
date: 2026-11-05T18:53:15.466343+00:00 commit: 18de59574016564ce4eb69da9f4363441ba33f7d
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make down
docker compose --profile bench down
Container mtusi2026lab3-grade3-20261105-lb-1 Stopping
Container mtusi2026lab3-grade3-20261105-api-1 Stopping
Container mtusi2026lab3-grade3-20261105-api-2 Stopping
Container mtusi2026lab3-grade3-20261105-lb-1 Stopped
Container mtusi2026lab3-grade3-20261105-lb-1 Removing
Container mtusi2026lab3-grade3-20261105-lb-1 Removed
Container mtusi2026lab3-grade3-20261105-api-1 Stopped
Container mtusi2026lab3-grade3-20261105-api-1 Removing
Container mtusi2026lab3-grade3-20261105-api-1 Removed
Container mtusi2026lab3-grade3-20261105-api-2 Stopped
Container mtusi2026lab3-grade3-20261105-api-2 Removing
Container mtusi2026lab3-grade3-20261105-api-2 Removed
Container mtusi2026lab3-grade3-20261105-valkey-1 Stopping
Container mtusi2026lab3-grade3-20261105-migrate-1 Stopping
Container mtusi2026lab3-grade3-20261105-migrate-1 Stopped
Container mtusi2026lab3-grade3-20261105-migrate-1 Removing
Container mtusi2026lab3-grade3-20261105-migrate-1 Removed
Container mtusi2026lab3-grade3-20261105-postgres-1 Stopping
Container mtusi2026lab3-grade3-20261105-valkey-1 Stopped
Container mtusi2026lab3-grade3-20261105-valkey-1 Removing
Container mtusi2026lab3-grade3-20261105-postgres-1 Stopped
Container mtusi2026lab3-grade3-20261105-postgres-1 Removing
Container mtusi2026lab3-grade3-20261105-valkey-1 Removed
Container mtusi2026lab3-grade3-20261105-postgres-1 Removed
Network mtusi2026lab3-grade3-20261105_edge Removing
Network mtusi2026lab3-grade3-20261105_backend Removing
Network mtusi2026lab3-grade3-20261105_edge Removed
Network mtusi2026lab3-grade3-20261105_backend Removed
exit_code: 0 elapsed_seconds: 3.336
+27
View File
@@ -0,0 +1,27 @@
date: 2026-11-05T18:57:54.159450+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make lb-check
python3 scripts/probe.py check --rounds 20 --out evidence/lb-check.json
{
"instances_one_token": {
"1b4a73f61b07": 20,
"8ffe0c70f4ea": 20
},
"same_key": {
"rounds": 20,
"parallel": 8,
"statuses": {
"201": 160
},
"instances": {
"8ffe0c70f4ea": 80,
"1b4a73f61b07": 80
},
"identical_bodies_rounds": 20,
"single_copy_rounds": 20,
"conflict_rounds": 20
},
"pass": true
}
exit_code: 0 elapsed_seconds: 0.648
+25
View File
@@ -0,0 +1,25 @@
date: 2026-11-05T18:58:38.021999+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make persistence-evidence
sh scripts/persistence-evidence.sh "http://127.0.0.1:18083" > evidence/persistence.txt
cat evidence/persistence.txt
date: 2026-11-05T18:58:38Z commit: 0a1f48b
== before: service hostname StartedAt status
api 1b4a73f61b07 2026-11-05T18:58:36.142839135Z running
api 8ffe0c70f4ea 2026-11-05T18:58:18.239416584Z running
lb 936b69811632 2026-11-05T18:56:03.008030758Z running
migrate c73a6ab4f829 2026-11-05T18:56:03.5137618Z exited
postgres 097df27ee36a 2026-11-05T18:56:02.802565633Z running
valkey ac9a3cf7b7a0 2026-11-05T18:56:02.774072466Z running
python3 tests/resilience.py --mode persistence --action-script "scripts/restart.sh" --base-url "http://127.0.0.1:18083"
Executing explicit persistence hook; hook output suppressed to avoid leaking secrets.
PASS: persistence preserved confirmed data and existing session. Hook scope needs operator evidence.
== after: service hostname StartedAt status
api 1b4a73f61b07 2026-11-05T18:58:43.578633972Z running
api 8ffe0c70f4ea 2026-11-05T18:58:43.512173305Z running
lb 936b69811632 2026-11-05T18:58:41.899974554Z running
migrate c73a6ab4f829 2026-11-05T18:58:42.423420221Z exited
postgres 097df27ee36a 2026-11-05T18:58:41.642264971Z running
valkey ac9a3cf7b7a0 2026-11-05T18:58:41.694216387Z running
exit_code: 0 elapsed_seconds: 9.441
+13
View File
@@ -0,0 +1,13 @@
date: 2026-11-05T18:58:18.083291+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make restore
scripts/restore.sh
Container mtusi2026lab3-grade3-final-20261105-api-2 Running
Container mtusi2026lab3-grade3-final-20261105-api-1 Starting
Container mtusi2026lab3-grade3-final-20261105-api-1 Started
Container mtusi2026lab3-grade3-final-20261105-api-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-2 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-api-2 Healthy
exit_code: 0 elapsed_seconds: 2.015
+13
View File
@@ -0,0 +1,13 @@
date: 2026-11-05T18:58:35.973739+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make restore
scripts/restore.sh
Container mtusi2026lab3-grade3-final-20261105-api-1 Running
Container mtusi2026lab3-grade3-final-20261105-api-2 Starting
Container mtusi2026lab3-grade3-final-20261105-api-2 Started
Container mtusi2026lab3-grade3-final-20261105-api-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-2 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-api-2 Healthy
exit_code: 0 elapsed_seconds: 2.004
+53
View File
@@ -0,0 +1,53 @@
date: 2026-11-05T18:57:54.853348+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make retry-check
python3 scripts/probe.py retry --out evidence/retry.json
{
"variants": [
{
"variant": "timeout",
"lost_attempt": {
"status": 0,
"client_timeout_s": 0.5,
"chat_lock_held_s": 1.5,
"replica": "1b4a73f61b07",
"replica_killed": false,
"replica_answered": 201
},
"retry": {
"after_s": 1.539,
"status": 201,
"attempts": 1,
"replica": "8ffe0c70f4ea"
},
"copies_in_history": 1,
"same_message": true,
"written_by": "lost attempt",
"pass": true
},
{
"variant": "kill",
"lost_attempt": {
"status": 0,
"client_timeout_s": 0.5,
"chat_lock_held_s": 1.5,
"replica": "8ffe0c70f4ea",
"replica_killed": true,
"replica_answered": null
},
"retry": {
"after_s": 1.551,
"status": 201,
"attempts": 1,
"replica": "1b4a73f61b07"
},
"copies_in_history": 1,
"same_message": true,
"written_by": "lost attempt",
"pass": true
}
],
"pass": true
}
exit_code: 0 elapsed_seconds: 7.326
+72
View File
@@ -0,0 +1,72 @@
date: 2026-11-05T18:58:59.414270+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make stack-evidence
sh scripts/evidence-stack.sh
date: 2026-11-05T18:58:59Z commit: 0a1f48b
$ docker compose --env-file .env config --quiet && echo valid
valid
$ docker compose ps --format '{{.Service}} {{.Name}} {{.Status}} {{.Ports}}'
api mtusi2026lab3-grade3-final-20261105-api-1 Up 16 seconds (healthy)
api mtusi2026lab3-grade3-final-20261105-api-2 Up 16 seconds (healthy)
lb mtusi2026lab3-grade3-final-20261105-lb-1 Up 17 seconds (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
postgres mtusi2026lab3-grade3-final-20261105-postgres-1 Up 18 seconds (healthy)
valkey mtusi2026lab3-grade3-final-20261105-valkey-1 Up 18 seconds (healthy)
$ docker compose config | grep -c container_name
0
$ docker port <каждая реплика api> # реплики не публикуют порт
8ffe0c70f4ea: []
1b4a73f61b07: []
$ docker inspect: hostname = X-Instance-Id, сети, лимиты CPU (nano) и памяти
api 1b4a73f61b07 /mtusi2026lab3-grade3-final-20261105-api-2 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
api 8ffe0c70f4ea /mtusi2026lab3-grade3-final-20261105-api-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
lb 936b69811632 /mtusi2026lab3-grade3-final-20261105-lb-1 nets=mtusi2026lab3-grade3-final-20261105_backend,mtusi2026lab3-grade3-final-20261105_edge, cpus=1000000000 mem=134217728 user=haproxy ro=true
postgres 097df27ee36a /mtusi2026lab3-grade3-final-20261105-postgres-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=2000000000 mem=1073741824 user=70:70 ro=false
valkey ac9a3cf7b7a0 /mtusi2026lab3-grade3-final-20261105-valkey-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=500000000 mem=134217728 user=999:1000 ro=false
$ curl LB stats: backend api, server status check
api1 UP L7OK 200
api2 UP L7OK 200
BACKEND UP
$ for i in 1..6: curl -D - http://127.0.0.1:18083/health/live | X-Instance-Id
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
date: 2026-11-05T18:59:00Z commit: 0a1f48b
host: Apple M4 Max, 16 CPU, 48 GiB RAM, macOS 15.1
docker: 28.3.2, VM: 16 CPU, 8217190400 bytes
compose: 2.38.2-desktop.1
images:
image: ${API_IMAGE:-mtusi-messenger:${COMPOSE_PROJECT_NAME}}
image: haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b
image: postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b
image: valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a
image: grafana/k6:2.3.0@sha256:2dd4756ec6e14e62778916e1eb850108e4b499304c02df56760fa0bdb0fba0b8
FROM python:3.14-slim-trixie@sha256:51dafde81dbdb6ebde285137a295cf18a47ca95234fe388a343719cb97305b3d AS builder
COPY --from=ghcr.io/astral-sh/uv:0.9.7@sha256:ba4857bf2a068e9bc0e64eed8563b065908a4cd6bfb66b531a9c424c8e25e142 /uv /usr/local/bin/uv
FROM python:3.14-slim-trixie@sha256:51dafde81dbdb6ebde285137a295cf18a47ca95234fe388a343719cb97305b3d AS runtime
python in image: Python 3.14.7
haproxy: HAProxy version 3.2.26-3e0f11a 2026/10/14 - https://haproxy.org/
packages (uv.lock):
fastapi 0.141.1
uvicorn 0.54.0
uvicorn-worker 0.4.0
gunicorn 26.2.0
sqlalchemy 2.0.45
alembic 1.16.5
asyncpg 0.32.0
argon2-cffi 25.1.0
pydantic 2.13.5
pydantic-settings 2.15.0
dishka 1.10.1
structlog 26.1.0
redis 8.1.0
process users (service uid command):
api 10001 python
lb 99 haproxy
postgres 70 postgres
valkey 999 tini
valkey 999 valkey-server
exit_code: 0 elapsed_seconds: 2.112
+155
View File
@@ -0,0 +1,155 @@
date: 2026-11-05T18:55:27.662096+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'docker volume ls --filter label=com.docker.compose.project="$COMPOSE_PROJECT_NAME"; docker compose config --quiet && make up && docker compose ps -a && docker compose exec -T postgres psql -U messenger -d messenger -c "SELECT version_num FROM alembic_version"'
DRIVER VOLUME NAME
sh scripts/secrets.sh
docker compose up -d --build --wait
#1 [internal] load local bake definitions
#1 reading from stdin 454B done
#1 DONE 0.0s
#2 [internal] load build definition from Dockerfile
#2 transferring dockerfile: 1.65kB done
#2 DONE 0.0s
#3 [internal] load metadata for ghcr.io/astral-sh/uv:0.9.7@sha256:ba4857bf2a068e9bc0e64eed8563b065908a4cd6bfb66b531a9c424c8e25e142
#3 DONE 0.0s
#4 [internal] load metadata for docker.io/library/python:3.14-slim-trixie@sha256:51dafde81dbdb6ebde285137a295cf18a47ca95234fe388a343719cb97305b3d
#4 DONE 1.7s
#5 [internal] load .dockerignore
#5 transferring context: 437B done
#5 DONE 0.0s
#6 FROM ghcr.io/astral-sh/uv:0.9.7@sha256:ba4857bf2a068e9bc0e64eed8563b065908a4cd6bfb66b531a9c424c8e25e142
#6 resolve ghcr.io/astral-sh/uv:0.9.7@sha256:ba4857bf2a068e9bc0e64eed8563b065908a4cd6bfb66b531a9c424c8e25e142 0.0s done
#6 DONE 0.0s
#7 [internal] load build context
#7 transferring context: 29.64kB done
#7 DONE 0.0s
#8 [builder 1/7] FROM docker.io/library/python:3.14-slim-trixie@sha256:51dafde81dbdb6ebde285137a295cf18a47ca95234fe388a343719cb97305b3d
#8 resolve docker.io/library/python:3.14-slim-trixie@sha256:51dafde81dbdb6ebde285137a295cf18a47ca95234fe388a343719cb97305b3d 0.0s done
#8 DONE 0.0s
#9 [builder 4/7] COPY pyproject.toml uv.lock README.md ./
#9 CACHED
#10 [builder 2/7] COPY --from=ghcr.io/astral-sh/uv:0.9.7@sha256:ba4857bf2a068e9bc0e64eed8563b065908a4cd6bfb66b531a9c424c8e25e142 /uv /usr/local/bin/uv
#10 CACHED
#11 [builder 3/7] WORKDIR /build
#11 CACHED
#12 [builder 5/7] RUN uv sync --locked --no-dev --no-install-project --no-editable
#12 CACHED
#13 [builder 6/7] COPY src ./src
#13 DONE 0.0s
#14 [builder 7/7] RUN uv sync --locked --no-dev --no-editable
#14 0.139 Resolved 64 packages in 0.40ms
#14 0.140 Building mtusi-messenger @ file:///build
#14 1.569 Built mtusi-messenger @ file:///build
#14 1.572 Prepared 1 package in 1.43s
#14 1.576 Installed 1 package in 4ms
#14 1.653 Bytecode compiled 1275 files in 76ms
#14 1.653 + mtusi-messenger==1.3.0 (from file:///build)
#14 DONE 1.7s
#15 [runtime 2/6] RUN groupadd --system --gid 10001 messenger && useradd --system --uid 10001 --gid messenger --no-create-home --shell /usr/sbin/nologin messenger
#15 CACHED
#16 [runtime 3/6] COPY --from=builder --chown=root:root /opt/venv /opt/venv
#16 DONE 0.2s
#17 [runtime 4/6] WORKDIR /app
#17 DONE 0.0s
#18 [runtime 5/6] COPY --chown=root:root alembic.ini ./
#18 DONE 0.0s
#19 [runtime 6/6] COPY --chown=root:root alembic ./alembic
#19 DONE 0.0s
#20 exporting to image
#20 exporting layers
#20 exporting layers 1.8s done
#20 exporting manifest sha256:5038ad65552ef8a56c20f7f9f042205fa4f08bed2182f7d170da334d08a3bd61
#20 exporting manifest sha256:5038ad65552ef8a56c20f7f9f042205fa4f08bed2182f7d170da334d08a3bd61 done
#20 exporting config sha256:de74256583c9ad3781e5456b23c7688aa2ee86733f0d16bcd296b9112aee8335 done
#20 exporting attestation manifest sha256:206b908d058f5f2d5d194ed07ef9ab77cc18e8bcc9445e252eb82c397e4e5c81 done
#20 exporting manifest list sha256:59081a6760b0d025ed7c613a68f6f939f3223f3ad2c6e8a9952ded4551c932ee done
#20 naming to docker.io/library/mtusi-messenger:mtusi2026lab3-grade3-final-20261105 done
#20 unpacking to docker.io/library/mtusi-messenger:mtusi2026lab3-grade3-final-20261105
#20 unpacking to docker.io/library/mtusi-messenger:mtusi2026lab3-grade3-final-20261105 0.3s done
#20 DONE 2.1s
#21 resolving provenance for metadata file
#21 DONE 0.0s
api Built
Network mtusi2026lab3-grade3-final-20261105_backend Creating
Network mtusi2026lab3-grade3-final-20261105_backend Created
Network mtusi2026lab3-grade3-final-20261105_edge Creating
Network mtusi2026lab3-grade3-final-20261105_edge Created
Volume "mtusi2026lab3-grade3-final-20261105_valkeydata" Creating
Volume "mtusi2026lab3-grade3-final-20261105_valkeydata" Created
Volume "mtusi2026lab3-grade3-final-20261105_pgdata" Creating
Volume "mtusi2026lab3-grade3-final-20261105_pgdata" Created
Container mtusi2026lab3-grade3-final-20261105-lb-1 Creating
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Creating
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Creating
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Created
Container mtusi2026lab3-grade3-final-20261105-lb-1 Created
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Created
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Creating
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Created
Container mtusi2026lab3-grade3-final-20261105-api-2 Creating
Container mtusi2026lab3-grade3-final-20261105-api-1 Creating
Container mtusi2026lab3-grade3-final-20261105-api-2 Created
Container mtusi2026lab3-grade3-final-20261105-api-1 Created
Container mtusi2026lab3-grade3-final-20261105-lb-1 Starting
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Starting
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Starting
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Started
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Started
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-lb-1 Started
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Starting
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Started
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Exited
Container mtusi2026lab3-grade3-final-20261105-api-1 Starting
Container mtusi2026lab3-grade3-final-20261105-api-1 Started
Container mtusi2026lab3-grade3-final-20261105-api-2 Starting
Container mtusi2026lab3-grade3-final-20261105-api-2 Started
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-lb-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-1 Waiting
Container mtusi2026lab3-grade3-final-20261105-api-2 Waiting
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Exited
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-api-1 Healthy
Container mtusi2026lab3-grade3-final-20261105-api-2 Healthy
Container mtusi2026lab3-grade3-final-20261105-lb-1 Healthy
scripts/lb-wait.sh
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
mtusi2026lab3-grade3-final-20261105-api-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 6 seconds ago Up 3 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-api-2 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "python -m gunicorn …" api 6 seconds ago Up 3 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-lb-1 haproxy:3.2.26-alpine@sha256:5893840576071e6217cd52ebdcc14f454c6f7a631056fa6f4e0f40d3cac4215b "docker-entrypoint.s…" lb 6 seconds ago Up 6 seconds (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
mtusi2026lab3-grade3-final-20261105-migrate-1 mtusi-messenger:mtusi2026lab3-grade3-final-20261105 "alembic upgrade head" migrate 6 seconds ago Exited (0) 4 seconds ago
mtusi2026lab3-grade3-final-20261105-postgres-1 postgres:17.11-alpine@sha256:266d3c257594e195b309ae9d1805e54c788f1d7b375f56bf6c367aac6c917e7b "docker-entrypoint.s…" postgres 6 seconds ago Up 6 seconds (healthy)
mtusi2026lab3-grade3-final-20261105-valkey-1 valkey/valkey:8.1.11-alpine@sha256:2602ace2be6569bc2bbb06f873776516ab9089821525be34f4305c67eb9db02a "tini -- docker-entr…" valkey 6 seconds ago Up 6 seconds (healthy)
version_num
-----------------------
0002_idempotency_keys
(1 row)
exit_code: 0 elapsed_seconds: 13.244
+41
View File
@@ -0,0 +1,41 @@
date: 2026-11-05T18:59:05.166340+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ sh -c 'make down && docker compose ps -a && docker volume ls --filter label=com.docker.compose.project="$COMPOSE_PROJECT_NAME" && docker volume ls --filter label=com.docker.compose.project=mtusi2026lab3-grade3-20261105'
docker compose --profile bench down
Container mtusi2026lab3-grade3-final-20261105-api-2 Stopping
Container mtusi2026lab3-grade3-final-20261105-api-1 Stopping
Container mtusi2026lab3-grade3-final-20261105-lb-1 Stopping
Container mtusi2026lab3-grade3-final-20261105-lb-1 Stopped
Container mtusi2026lab3-grade3-final-20261105-lb-1 Removing
Container mtusi2026lab3-grade3-final-20261105-lb-1 Removed
Container mtusi2026lab3-grade3-final-20261105-api-2 Stopped
Container mtusi2026lab3-grade3-final-20261105-api-2 Removing
Container mtusi2026lab3-grade3-final-20261105-api-1 Stopped
Container mtusi2026lab3-grade3-final-20261105-api-1 Removing
Container mtusi2026lab3-grade3-final-20261105-api-2 Removed
Container mtusi2026lab3-grade3-final-20261105-api-1 Removed
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Stopping
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Stopping
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Stopped
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Removing
Container mtusi2026lab3-grade3-final-20261105-migrate-1 Removed
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Stopping
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Stopped
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Removing
Container mtusi2026lab3-grade3-final-20261105-postgres-1 Removed
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Stopped
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Removing
Container mtusi2026lab3-grade3-final-20261105-valkey-1 Removed
Network mtusi2026lab3-grade3-final-20261105_edge Removing
Network mtusi2026lab3-grade3-final-20261105_backend Removing
Network mtusi2026lab3-grade3-final-20261105_edge Removed
Network mtusi2026lab3-grade3-final-20261105_backend Removed
NAME IMAGE COMMAND SERVICE CREATED STATUS PORTS
DRIVER VOLUME NAME
local mtusi2026lab3-grade3-final-20261105_pgdata
local mtusi2026lab3-grade3-final-20261105_valkeydata
DRIVER VOLUME NAME
local mtusi2026lab3-grade3-20261105_pgdata
local mtusi2026lab3-grade3-20261105_valkeydata
exit_code: 0 elapsed_seconds: 3.351
+7
View File
@@ -0,0 +1,7 @@
date: 2026-11-05T18:59:01.562450+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make storage-evidence
sh scripts/evidence-storage.sh
evidence/{schema,migrations,kdf,secrets}.txt обновлены
exit_code: 0 elapsed_seconds: 3.569
Binary file not shown.
+23
View File
@@ -0,0 +1,23 @@
date: 2026-11-05T19:06:00.788460+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ git diff --check
evidence/migrations.txt:3: trailing whitespace.
+ users | sessions | chats | members | messages | keys | versions
evidence/migrations.txt:10: trailing whitespace.
+ users | sessions | chats | members | messages | keys | versions
evidence/schema.txt:120: trailing whitespace.
+ Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
evidence/schema.txt:122: trailing whitespace.
+ version_num | character varying(32) | | not null | | extended | | |
evidence/schema.txt:128: trailing whitespace.
+ version_num
evidence/stack.txt:5: trailing whitespace.
+api mtusi2026lab3-grade3-final-20261105-api-1 Up 16 seconds (healthy)
evidence/stack.txt:6: trailing whitespace.
+api mtusi2026lab3-grade3-final-20261105-api-2 Up 16 seconds (healthy)
evidence/stack.txt:8: trailing whitespace.
+postgres mtusi2026lab3-grade3-final-20261105-postgres-1 Up 18 seconds (healthy)
evidence/stack.txt:9: trailing whitespace.
+valkey mtusi2026lab3-grade3-final-20261105-valkey-1 Up 18 seconds (healthy)
exit_code: 2 elapsed_seconds: 0.017
+5 -5
View File
@@ -1,13 +1,13 @@
date: 2026-10-30T02:54:58Z commit: e049c26
date: 2026-11-05T18:59:04Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
$ psql -c "SELECT substring(password_hash from '^[$]argon2id[$]v=[0-9]+[$]m=[0-9]+,t=[0-9]+,p=[0-9]+[$]') AS kdf_prefix, username = 'seed_author' AS seed_stub, count(*) AS users, min(length(password_hash)) AS min_length, max(length(password_hash)) AS max_length FROM users GROUP BY 1, 2 ORDER BY 2"
kdf_prefix | seed_stub | users | min_length | max_length
kdf_prefix | seed_stub | users | min_length | max_length
---------------------------------+-----------+-------+------------+------------
$argon2id$v=19$m=19456,t=2,p=1$ | f | 120 | 97 | 97
$argon2id$v=19$m=19456,t=2,p=1$ | f | 70 | 97 | 97
(1 row)
$ psql -c "SELECT octet_length(token_hash) AS stored_bytes, count(*) AS sessions FROM sessions GROUP BY 1"
stored_bytes | sessions
stored_bytes | sessions
--------------+----------
32 | 114
32 | 24
(1 row)
+4 -4
View File
@@ -1,7 +1,7 @@
{
"instances_one_token": {
"fe75c6c37e5a": 20,
"ff81f93e8b0d": 20
"1b4a73f61b07": 20,
"8ffe0c70f4ea": 20
},
"same_key": {
"rounds": 20,
@@ -10,8 +10,8 @@
"201": 160
},
"instances": {
"ff81f93e8b0d": 80,
"fe75c6c37e5a": 80
"8ffe0c70f4ea": 80,
"1b4a73f61b07": 80
},
"identical_bodies_rounds": 20,
"single_copy_rounds": 20,
+9 -10
View File
@@ -1,15 +1,14 @@
date: 2026-10-30T02:54:56Z commit: e049c26
$ psql -c "SELECT (SELECT count(*) FROM users) users, (SELECT count(*) FROM sessions) sessions, (SELECT count(*) FROM chats) chats, (SELECT count(*) FROM chat_members) members, (SELECT count(*) FROM messages) messages, (SELECT count(*) FROM idempotency_keys) keys, (SELECT count(*) FROM schema_migrations) versions"
users | sessions | chats | members | messages | keys | versions
-------+----------+-------+---------+----------+-------+----------
120 | 114 | 51 | 102 | 30748 | 30748 | 2
date: 2026-11-05T18:59:02Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
$ psql -c "SELECT (SELECT count(*) FROM users) users, (SELECT count(*) FROM sessions) sessions, (SELECT count(*) FROM chats) chats, (SELECT count(*) FROM chat_members) members, (SELECT count(*) FROM messages) messages, (SELECT count(*) FROM idempotency_keys) keys, (SELECT count(*) FROM alembic_version) versions"
users | sessions | chats | members | messages | keys | versions
-------+----------+-------+---------+----------+------+----------
70 | 24 | 6 | 12 | 284 | 284 | 1
(1 row)
$ make migrate
{"reason":"up to date","event":"migration.completed","level":"info","ts":"2026-10-30T02:54:58.470450Z"}
$ psql -c "SELECT (SELECT count(*) FROM users) users, (SELECT count(*) FROM sessions) sessions, (SELECT count(*) FROM chats) chats, (SELECT count(*) FROM chat_members) members, (SELECT count(*) FROM messages) messages, (SELECT count(*) FROM idempotency_keys) keys, (SELECT count(*) FROM schema_migrations) versions"
users | sessions | chats | members | messages | keys | versions
-------+----------+-------+---------+----------+-------+----------
120 | 114 | 51 | 102 | 30748 | 30748 | 2
$ psql -c "SELECT (SELECT count(*) FROM users) users, (SELECT count(*) FROM sessions) sessions, (SELECT count(*) FROM chats) chats, (SELECT count(*) FROM chat_members) members, (SELECT count(*) FROM messages) messages, (SELECT count(*) FROM idempotency_keys) keys, (SELECT count(*) FROM alembic_version) versions"
users | sessions | chats | members | messages | keys | versions
-------+----------+-------+---------+----------+------+----------
70 | 24 | 6 | 12 | 284 | 284 | 1
(1 row)
+14 -14
View File
@@ -1,18 +1,18 @@
date: 2026-10-30T02:45:46Z commit: e049c26
date: 2026-11-05T18:58:38Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
== before: service hostname StartedAt status
api fe75c6c37e5a 2026-10-30T02:45:42.870380597Z running
api ff81f93e8b0d 2026-10-30T02:45:24.812924046Z running
lb 35712870f3c4 2026-10-30T02:44:54.845670713Z running
migrate a384e9cbafb2 2026-10-30T02:44:55.92784763Z exited
postgres cd7b0d78bc19 2026-10-30T02:44:54.84929213Z running
valkey c9501d6e445a 2026-10-30T02:44:54.848454921Z running
python3 tests/resilience.py --mode persistence --action-script "scripts/restart.sh" --base-url "http://127.0.0.1:18083"
api 1b4a73f61b07 2026-11-05T18:58:36.142839135Z running
api 8ffe0c70f4ea 2026-11-05T18:58:18.239416584Z running
lb 936b69811632 2026-11-05T18:56:03.008030758Z running
migrate c73a6ab4f829 2026-11-05T18:56:03.5137618Z exited
postgres 097df27ee36a 2026-11-05T18:56:02.802565633Z running
valkey ac9a3cf7b7a0 2026-11-05T18:56:02.774072466Z running
python3 tests/resilience.py --mode persistence --action-script "scripts/restart.sh" --base-url "http://127.0.0.1:18083"
Executing explicit persistence hook; hook output suppressed to avoid leaking secrets.
PASS: persistence preserved confirmed data and existing session. Hook scope needs operator evidence.
== after: service hostname StartedAt status
api fe75c6c37e5a 2026-10-30T02:45:51.665472503Z running
api ff81f93e8b0d 2026-10-30T02:45:51.605189211Z running
lb 35712870f3c4 2026-10-30T02:45:50.031474752Z running
migrate a384e9cbafb2 2026-10-30T02:45:50.534128753Z exited
postgres cd7b0d78bc19 2026-10-30T02:45:49.755618211Z running
valkey c9501d6e445a 2026-10-30T02:45:49.792453169Z running
api 1b4a73f61b07 2026-11-05T18:58:43.578633972Z running
api 8ffe0c70f4ea 2026-11-05T18:58:43.512173305Z running
lb 936b69811632 2026-11-05T18:58:41.899974554Z running
migrate c73a6ab4f829 2026-11-05T18:58:42.423420221Z exited
postgres 097df27ee36a 2026-11-05T18:58:41.642264971Z running
valkey ac9a3cf7b7a0 2026-11-05T18:58:41.694216387Z running
+6 -6
View File
@@ -6,15 +6,15 @@
"status": 0,
"client_timeout_s": 0.5,
"chat_lock_held_s": 1.5,
"replica": "fe75c6c37e5a",
"replica": "1b4a73f61b07",
"replica_killed": false,
"replica_answered": 201
},
"retry": {
"after_s": 1.522,
"after_s": 1.539,
"status": 201,
"attempts": 1,
"replica": "ff81f93e8b0d"
"replica": "8ffe0c70f4ea"
},
"copies_in_history": 1,
"same_message": true,
@@ -27,15 +27,15 @@
"status": 0,
"client_timeout_s": 0.5,
"chat_lock_held_s": 1.5,
"replica": "ff81f93e8b0d",
"replica": "8ffe0c70f4ea",
"replica_killed": true,
"replica_answered": null
},
"retry": {
"after_s": 1.518,
"after_s": 1.551,
"status": 201,
"attempts": 1,
"replica": "fe75c6c37e5a"
"replica": "1b4a73f61b07"
},
"copies_in_history": 1,
"same_message": true,
+46 -49
View File
@@ -1,13 +1,13 @@
date: 2026-10-30T02:54:55Z commit: e049c26
date: 2026-11-05T18:59:01Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
$ psql -c '\d+ users'
Table "public.users"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
---------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
id | uuid | | not null | | plain | | |
username | text | | not null | | extended | | |
display_name | text | | not null | | extended | | |
password_hash | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
id | uuid | | not null | | plain | | |
username | text | | not null | | extended | | |
display_name | text | | not null | | extended | | |
password_hash | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
Indexes:
"users_pkey" PRIMARY KEY, btree (id)
"users_username_key" UNIQUE CONSTRAINT, btree (username)
@@ -22,12 +22,12 @@ Access method: heap
$ psql -c '\d+ sessions'
Table "public.sessions"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
token_hash | bytea | | not null | | extended | | |
user_id | uuid | | not null | | plain | | |
created_at | timestamp with time zone | | not null | | plain | | |
expires_at | timestamp with time zone | | not null | | plain | | |
token_hash | bytea | | not null | | extended | | |
user_id | uuid | | not null | | plain | | |
created_at | timestamp with time zone | | not null | | plain | | |
expires_at | timestamp with time zone | | not null | | plain | | |
Indexes:
"sessions_pkey" PRIMARY KEY, btree (token_hash)
"sessions_user_idx" btree (user_id)
@@ -40,12 +40,12 @@ Access method: heap
$ psql -c '\d+ chats'
Table "public.chats"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
-----------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
id | uuid | | not null | | plain | | |
title | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
last_message_at | timestamp with time zone | | | | plain | | |
id | uuid | | not null | | plain | | |
title | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
last_message_at | timestamp with time zone | | | | plain | | |
Indexes:
"chats_pkey" PRIMARY KEY, btree (id)
Check constraints:
@@ -56,12 +56,12 @@ Access method: heap
$ psql -c '\d+ chat_members'
Table "public.chat_members"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
-----------------+--------------------------+-----------+----------+---------+---------+-------------+--------------+-------------
chat_id | uuid | | not null | | plain | | |
user_id | uuid | | not null | | plain | | |
position | smallint | | not null | | plain | | |
chat_created_at | timestamp with time zone | | not null | | plain | | |
chat_id | uuid | | not null | | plain | | |
user_id | uuid | | not null | | plain | | |
position | smallint | | not null | | plain | | |
chat_created_at | timestamp with time zone | | not null | | plain | | |
Indexes:
"chat_members_pkey" PRIMARY KEY, btree (chat_id, user_id)
"chat_members_user_idx" btree (user_id, chat_created_at, chat_id)
@@ -77,13 +77,13 @@ Access method: heap
$ psql -c '\d+ messages'
Table "public.messages"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
id | uuid | | not null | | plain | | |
chat_id | uuid | | not null | | plain | | |
sender_id | uuid | | not null | | plain | | |
text | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
id | uuid | | not null | | plain | | |
chat_id | uuid | | not null | | plain | | |
sender_id | uuid | | not null | | plain | | |
text | text | | not null | | extended | | |
created_at | timestamp with time zone | | not null | | plain | | |
Indexes:
"messages_pkey" PRIMARY KEY, btree (id)
"messages_history_idx" btree (chat_id, created_at, id)
@@ -97,14 +97,14 @@ Access method: heap
$ psql -c '\d+ idempotency_keys'
Table "public.idempotency_keys"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
-------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
chat_id | uuid | | not null | | plain | | |
user_id | uuid | | not null | | plain | | |
key | text | | not null | | extended | | |
fingerprint | bytea | | not null | | extended | | |
message_id | uuid | | not null | | plain | | |
created_at | timestamp with time zone | | not null | | plain | | |
chat_id | uuid | | not null | | plain | | |
user_id | uuid | | not null | | plain | | |
key | text | | not null | | extended | | |
fingerprint | bytea | | not null | | extended | | |
message_id | uuid | | not null | | plain | | |
created_at | timestamp with time zone | | not null | | plain | | |
Indexes:
"idempotency_keys_pkey" PRIMARY KEY, btree (chat_id, user_id, key)
Check constraints:
@@ -115,21 +115,18 @@ Foreign-key constraints:
"idempotency_keys_message_id_fkey" FOREIGN KEY (message_id) REFERENCES messages(id) ON DELETE CASCADE
Access method: heap
$ psql -c '\d+ schema_migrations'
Table "public.schema_migrations"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
------------+--------------------------+-----------+----------+---------+----------+-------------+--------------+-------------
version | text | | not null | | extended | | |
checksum | text | | not null | | extended | | |
applied_at | timestamp with time zone | | not null | now() | plain | | |
$ psql -c '\d+ alembic_version'
Table "public.alembic_version"
Column | Type | Collation | Nullable | Default | Storage | Compression | Stats target | Description
-------------+-----------------------+-----------+----------+---------+----------+-------------+--------------+-------------
version_num | character varying(32) | | not null | | extended | | |
Indexes:
"schema_migrations_pkey" PRIMARY KEY, btree (version)
"alembic_version_pkc" PRIMARY KEY, btree (version_num)
Access method: heap
$ psql -c 'SELECT version, left(checksum, 12), applied_at FROM schema_migrations'
version | checksum | applied_at
-----------------------+--------------+-------------------------------
0001_init | 9a13618f078a | 2026-10-30 02:44:56.558169+00
0002_idempotency_keys | d9159a355532 | 2026-10-30 02:44:56.565046+00
(2 rows)
$ psql -c 'SELECT version_num FROM alembic_version'
version_num
-----------------------
0002_idempotency_keys
(1 row)
+4 -4
View File
@@ -1,4 +1,4 @@
date: 2026-10-30T02:54:59Z commit: e049c26
date: 2026-11-05T18:59:04Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
$ git ls-files secrets .env backups volumes
(пусто: секретов, .env, дампов и volumes в Git нет)
$ git check-ignore -v secrets/database_url secrets/postgres_password .env backups/
@@ -6,7 +6,7 @@ $ git check-ignore -v secrets/database_url secrets/postgres_password .env backup
.gitignore:5:secrets/ secrets/postgres_password
.gitignore:2:.env .env
.gitignore:15:backups/ backups/
$ docker volume ls --filter label=com.docker.compose.project=mtusi2026lab3
$ docker volume ls --filter label=com.docker.compose.project=mtusi2026lab3-grade3-final-20261105
DRIVER VOLUME NAME
local mtusi2026lab3_pgdata
local mtusi2026lab3_valkeydata
local mtusi2026lab3-grade3-final-20261105_pgdata
local mtusi2026lab3-grade3-final-20261105_valkeydata
+6 -4
View File
@@ -1,5 +1,7 @@
date: 2026-10-30T02:45:01Z commit: e049c26
$ make test # BASE_URL=http://127.0.0.1:18083 — порт lb из docker compose port
python3 tests/smoke.py --base-url "http://127.0.0.1:18083"
date: 2026-11-05T18:57:53.639190+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make test
python3 tests/smoke.py --base-url "http://127.0.0.1:18083"
PASS: lab3 public API scenario; infrastructure and grading evidence remain separate.
exit=0
exit_code: 0 elapsed_seconds: 0.471
+20 -20
View File
@@ -1,31 +1,31 @@
date: 2026-10-30T02:45:01Z commit: e049c26
date: 2026-11-05T18:58:59Z commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
$ docker compose --env-file .env config --quiet && echo valid
valid
$ docker compose ps --format '{{.Service}} {{.Name}} {{.Status}} {{.Ports}}'
api mtusi2026lab3-api-1 Up 4 seconds (healthy)
api mtusi2026lab3-api-2 Up 4 seconds (healthy)
lb mtusi2026lab3-lb-1 Up 7 seconds (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
postgres mtusi2026lab3-postgres-1 Up 7 seconds (healthy)
valkey mtusi2026lab3-valkey-1 Up 7 seconds (healthy)
api mtusi2026lab3-grade3-final-20261105-api-1 Up 16 seconds (healthy)
api mtusi2026lab3-grade3-final-20261105-api-2 Up 16 seconds (healthy)
lb mtusi2026lab3-grade3-final-20261105-lb-1 Up 17 seconds (healthy) 127.0.0.1:18083->8080/tcp, 127.0.0.1:23083->8404/tcp
postgres mtusi2026lab3-grade3-final-20261105-postgres-1 Up 18 seconds (healthy)
valkey mtusi2026lab3-grade3-final-20261105-valkey-1 Up 18 seconds (healthy)
$ docker compose config | grep -c container_name
0
$ docker port <каждая реплика api> # реплики не публикуют порт
ff81f93e8b0d: []
fe75c6c37e5a: []
8ffe0c70f4ea: []
1b4a73f61b07: []
$ docker inspect: hostname = X-Instance-Id, сети, лимиты CPU (nano) и памяти
api fe75c6c37e5a /mtusi2026lab3-api-2 nets=mtusi2026lab3_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
api ff81f93e8b0d /mtusi2026lab3-api-1 nets=mtusi2026lab3_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
lb 35712870f3c4 /mtusi2026lab3-lb-1 nets=mtusi2026lab3_backend,mtusi2026lab3_edge, cpus=1000000000 mem=134217728 user=haproxy ro=true
postgres cd7b0d78bc19 /mtusi2026lab3-postgres-1 nets=mtusi2026lab3_backend, cpus=2000000000 mem=1073741824 user=70:70 ro=false
valkey c9501d6e445a /mtusi2026lab3-valkey-1 nets=mtusi2026lab3_backend, cpus=500000000 mem=134217728 user=999:1000 ro=false
api 1b4a73f61b07 /mtusi2026lab3-grade3-final-20261105-api-2 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
api 8ffe0c70f4ea /mtusi2026lab3-grade3-final-20261105-api-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=1000000000 mem=536870912 user=10001:10001 ro=true
lb 936b69811632 /mtusi2026lab3-grade3-final-20261105-lb-1 nets=mtusi2026lab3-grade3-final-20261105_backend,mtusi2026lab3-grade3-final-20261105_edge, cpus=1000000000 mem=134217728 user=haproxy ro=true
postgres 097df27ee36a /mtusi2026lab3-grade3-final-20261105-postgres-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=2000000000 mem=1073741824 user=70:70 ro=false
valkey ac9a3cf7b7a0 /mtusi2026lab3-grade3-final-20261105-valkey-1 nets=mtusi2026lab3-grade3-final-20261105_backend, cpus=500000000 mem=134217728 user=999:1000 ro=false
$ curl LB stats: backend api, server status check
api1 UP L7OK 200
api2 UP L7OK 200
BACKEND UP
BACKEND UP
$ for i in 1..6: curl -D - http://127.0.0.1:18083/health/live | X-Instance-Id
x-instance-id: fe75c6c37e5a
x-instance-id: ff81f93e8b0d
x-instance-id: fe75c6c37e5a
x-instance-id: ff81f93e8b0d
x-instance-id: fe75c6c37e5a
x-instance-id: ff81f93e8b0d
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
x-instance-id: 1b4a73f61b07
x-instance-id: 8ffe0c70f4ea
+248 -227
View File
@@ -1,6 +1,7 @@
date: 2026-10-30T02:44:17Z commit: e049c26
$ PYTEST_ADDOPTS=-vv make student-test # все собственные тесты без маркера stack (одноразовые PostgreSQL и Valkey в Docker), по именам
.venv/bin/pytest
date: 2026-11-05T18:55:39.665597+00:00 commit: 0a1f48bd73e5780c732356880c23fdb476bcff98
environment: COMPOSE_PROJECT_NAME=mtusi2026lab3-grade3-final-20261105 LB_HTTP_PORT=18083 LB_STATS_PORT=23083 API_REPLICAS=2 NO_PROXY=localhost,127.0.0.1,::1
$ make student-test PYTEST_ARGS=-vv
.venv/bin/pytest -vv
============================= test session starts ==============================
platform darwin -- Python 3.14.5, pytest-9.1.1, pluggy-1.6.0 -- <repo>/.venv/bin/python
cachedir: .pytest_cache
@@ -9,260 +10,280 @@ configfile: pyproject.toml
testpaths: student-tests
plugins: asyncio-1.4.0, anyio-4.15.1
asyncio: mode=Mode.AUTO, debug=False, asyncio_default_fixture_loop_scope=function, asyncio_default_test_loop_scope=function
collecting ... collected 255 items / 12 deselected / 243 selected
collecting ... collected 283 items / 12 deselected / 271 selected
student-tests/api/test_access.py::test_outsider_gets_404_on_chat PASSED [ 0%]
student-tests/api/test_access.py::test_unknown_chat_is_indistinguishable_from_foreign PASSED [ 0%]
student-tests/api/test_access.py::test_outsider_cannot_write PASSED [ 1%]
student-tests/api/test_access.py::test_outsider_cannot_read_history PASSED [ 1%]
student-tests/api/test_access.py::test_access_checked_before_body PASSED [ 2%]
student-tests/api/test_access.py::test_access_checked_before_body PASSED [ 1%]
student-tests/api/test_access.py::test_chat_list_hides_foreign_chats PASSED [ 2%]
student-tests/api/test_access.py::test_403_is_never_used PASSED [ 2%]
student-tests/api/test_access.py::test_request_shape_is_checked_before_access PASSED [ 3%]
student-tests/api/test_access.py::test_request_shape_is_checked_before_access PASSED [ 2%]
student-tests/api/test_access.py::test_outsider_does_not_wait_for_members_lock PASSED [ 3%]
student-tests/api/test_bounded_contexts.py::test_identity_does_not_know_about_messaging PASSED [ 4%]
student-tests/api/test_bounded_contexts.py::test_identity_does_not_know_about_messaging PASSED [ 3%]
student-tests/api/test_bounded_contexts.py::test_domains_do_not_import_infrastructure PASSED [ 4%]
student-tests/api/test_bounded_contexts.py::test_core_layers_do_not_import_pydantic PASSED [ 4%]
student-tests/api/test_bounded_contexts.py::test_shared_knows_nothing_about_zones PASSED [ 5%]
student-tests/api/test_bounded_contexts.py::test_shared_knows_nothing_about_zones PASSED [ 4%]
student-tests/api/test_bounded_contexts.py::test_shared_core_is_free_of_transport PASSED [ 5%]
student-tests/api/test_bounded_contexts.py::test_shared_core_holds_only_platform PASSED [ 6%]
student-tests/api/test_bounded_contexts.py::test_shared_entrypoints_hold_only_transport PASSED [ 6%]
student-tests/api/test_bounded_contexts.py::test_shared_core_holds_only_platform PASSED [ 5%]
student-tests/api/test_bounded_contexts.py::test_shared_entrypoints_hold_only_transport PASSED [ 5%]
student-tests/api/test_bounded_contexts.py::test_every_zone_owns_its_errors_events_and_commands PASSED [ 6%]
student-tests/api/test_bounded_contexts.py::test_every_zone_owns_its_http_layer PASSED [ 7%]
student-tests/api/test_bounded_contexts.py::test_every_zone_owns_its_http_layer PASSED [ 6%]
student-tests/api/test_bounded_contexts.py::test_only_main_knows_both_zones PASSED [ 7%]
student-tests/api/test_bounded_contexts.py::test_application_has_no_separate_entrypoints_root PASSED [ 8%]
student-tests/api/test_bounded_contexts.py::test_shared_source_mentions_no_domain_vocabulary PASSED [ 8%]
student-tests/api/test_bounded_contexts.py::test_shared_declares_no_concrete_commands_or_events PASSED [ 9%]
student-tests/api/test_bounded_contexts.py::test_shared_has_no_test_doubles PASSED [ 9%]
student-tests/api/test_bounded_contexts.py::test_zone_errors_do_not_leak_transport_codes PASSED [ 9%]
student-tests/api/test_bounded_contexts.py::test_sql_of_each_zone_reads_only_its_tables PASSED [ 10%]
student-tests/api/test_bounded_contexts.py::test_messaging_does_not_import_identity_at_all PASSED [ 10%]
student-tests/api/test_cache.py::test_second_check_is_served_from_cache PASSED [ 11%]
student-tests/api/test_cache.py::test_logout_writes_tombstone_before_database PASSED [ 11%]
student-tests/api/test_bounded_contexts.py::test_application_has_no_separate_entrypoints_root PASSED [ 7%]
student-tests/api/test_bounded_contexts.py::test_shared_source_mentions_no_domain_vocabulary PASSED [ 7%]
student-tests/api/test_bounded_contexts.py::test_shared_declares_no_concrete_commands_or_events PASSED [ 8%]
student-tests/api/test_bounded_contexts.py::test_shared_has_no_test_doubles PASSED [ 8%]
student-tests/api/test_bounded_contexts.py::test_zone_errors_do_not_leak_transport_codes PASSED [ 8%]
student-tests/api/test_bounded_contexts.py::test_sql_of_each_zone_reads_only_its_tables PASSED [ 9%]
student-tests/api/test_bounded_contexts.py::test_messaging_does_not_import_identity_at_all PASSED [ 9%]
student-tests/api/test_bounded_contexts.py::test_sqlalchemy_stays_in_infrastructure_and_asyncpg_is_only_a_driver PASSED [ 9%]
student-tests/api/test_cache.py::test_second_check_is_served_from_cache PASSED [ 10%]
student-tests/api/test_cache.py::test_logout_writes_tombstone_before_database PASSED [ 10%]
student-tests/api/test_cache.py::test_logout_rejected_by_database_changes_nothing PASSED [ 11%]
student-tests/api/test_cache.py::test_fill_racing_with_logout_does_not_revive_token PASSED [ 12%]
student-tests/api/test_cache.py::test_flushall_loses_nothing PASSED [ 12%]
student-tests/api/test_cache.py::test_unreachable_cache_is_bypassed_without_anonymous_access PASSED [ 13%]
student-tests/api/test_concurrency.py::test_hundred_messages_from_ten_clients PASSED [ 13%]
student-tests/api/test_concurrency.py::test_history_follows_the_clock_but_never_moves_back PASSED [ 13%]
student-tests/api/test_concurrency.py::test_parallel_registration_keeps_username_unique PASSED [ 14%]
student-tests/api/test_concurrency.py::test_parallel_chat_creation_is_atomic PASSED [ 14%]
student-tests/api/test_consistency.py::test_registration_is_visible_to_chats_immediately PASSED [ 15%]
student-tests/api/test_consistency.py::test_parallel_registrations_are_all_usable_as_members PASSED [ 15%]
student-tests/api/test_consistency.py::test_rejected_registration_leaves_no_trace PASSED [ 16%]
student-tests/api/test_consistency.py::test_failed_chat_creation_rolls_back_both_tables PASSED [ 16%]
student-tests/api/test_consistency.py::test_rejected_message_does_not_enter_history PASSED [ 16%]
student-tests/api/test_consistency.py::test_confirmed_write_is_visible_to_next_read PASSED [ 17%]
student-tests/api/test_consistency.py::test_parallel_writes_across_zones_keep_counts_consistent PASSED [ 17%]
student-tests/api/test_consistency.py::test_chat_membership_survives_parallel_reads_and_writes PASSED [ 18%]
student-tests/api/test_drain.py::test_draining_replica_is_not_ready_but_alive PASSED [ 18%]
student-tests/api/test_drain.py::test_sigterm_leaves_rotation_then_closes_and_cancels_stuck_requests PASSED [ 18%]
student-tests/api/test_events.py::test_event_has_no_message_text PASSED [ 19%]
student-tests/api/test_events.py::test_every_subscriber_receives_event PASSED [ 19%]
student-tests/api/test_events.py::test_failing_subscriber_does_not_block_others PASSED [ 20%]
student-tests/api/test_events.py::test_queue_overflow_drops_events_without_raising PASSED [ 20%]
student-tests/api/test_events.py::test_publication_does_not_delay_response PASSED [ 20%]
student-tests/api/test_events.py::test_null_logger_hides_everything PASSED [ 21%]
student-tests/api/test_idempotency.py::test_replay_returns_the_same_message PASSED [ 21%]
student-tests/api/test_idempotency.py::test_same_json_in_other_layout_is_a_replay PASSED [ 22%]
student-tests/api/test_idempotency.py::test_other_body_with_same_key_conflicts PASSED [ 22%]
student-tests/api/test_idempotency.py::test_missing_key_is_rejected PASSED [ 23%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[0] PASSED [ 23%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[1] PASSED [ 23%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[2] PASSED [ 24%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[3] PASSED [ 24%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[4] PASSED [ 25%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[5] PASSED [ 25%]
student-tests/api/test_idempotency.py::test_rejected_attempt_does_not_take_the_key PASSED [ 25%]
student-tests/api/test_idempotency.py::test_key_is_scoped_by_user_and_chat PASSED [ 26%]
student-tests/api/test_idempotency.py::test_replay_checks_session_and_access_again PASSED [ 26%]
student-tests/api/test_idempotency.py::test_expired_key_starts_over PASSED [ 27%]
student-tests/api/test_idempotency.py::test_concurrent_retries_through_two_replicas_store_one_message PASSED [ 27%]
student-tests/api/test_instance.py::test_every_response_names_the_replica PASSED [ 27%]
student-tests/api/test_instance.py::test_rejected_body_names_the_replica PASSED [ 28%]
student-tests/api/test_instance.py::test_unhandled_error_names_the_replica PASSED [ 28%]
student-tests/api/test_instance.py::test_replica_defaults_to_container_hostname PASSED [ 29%]
student-tests/api/test_migrations.py::test_migrations_are_ordered_and_versioned PASSED [ 29%]
student-tests/api/test_migrations.py::test_rerun_changes_nothing PASSED [ 30%]
student-tests/api/test_migrations.py::test_changed_migration_is_refused PASSED [ 30%]
student-tests/api/test_migrations.py::test_sender_must_be_member_even_bypassing_api PASSED [ 30%]
student-tests/api/test_migrations.py::test_key_needs_a_member_and_a_message PASSED [ 31%]
student-tests/api/test_negative.py::test_malformed_json PASSED [ 31%]
student-tests/api/test_negative.py::test_unexpected_field PASSED [ 32%]
student-tests/api/test_negative.py::test_wrong_types PASSED [ 32%]
student-tests/api/test_negative.py::test_invalid_registration[body0] PASSED [ 32%]
student-tests/api/test_negative.py::test_invalid_registration[body1] PASSED [ 33%]
student-tests/api/test_negative.py::test_invalid_registration[body2] PASSED [ 33%]
student-tests/api/test_negative.py::test_invalid_registration[body3] PASSED [ 34%]
student-tests/api/test_negative.py::test_invalid_registration[body4] PASSED [ 34%]
student-tests/api/test_negative.py::test_invalid_registration[body5] PASSED [ 34%]
student-tests/api/test_negative.py::test_invalid_registration[body6] PASSED [ 35%]
student-tests/api/test_negative.py::test_invalid_registration[body7] PASSED [ 35%]
student-tests/api/test_negative.py::test_invalid_registration[body8] PASSED [ 36%]
student-tests/api/test_negative.py::test_invalid_registration[body9] PASSED [ 36%]
student-tests/api/test_negative.py::test_invalid_registration[body10] PASSED [ 37%]
student-tests/api/test_negative.py::test_duplicate_username PASSED [ 37%]
student-tests/api/test_negative.py::test_missing_identity PASSED [ 37%]
student-tests/api/test_negative.py::test_invalid_bearer[] PASSED [ 38%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer] PASSED [ 38%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer ] PASSED [ 39%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer not a token] PASSED [ 39%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 39%]
student-tests/api/test_negative.py::test_invalid_bearer[Token abcdef] PASSED [ 40%]
student-tests/api/test_negative.py::test_invalid_bearer[11111111-1111-4111-8111-111111111111] PASSED [ 40%]
student-tests/api/test_negative.py::test_user_id_header_alone_is_ignored PASSED [ 41%]
student-tests/api/test_negative.py::test_identity_checked_before_body PASSED [ 41%]
student-tests/api/test_negative.py::test_empty_message_rejected PASSED [ 41%]
student-tests/api/test_negative.py::test_long_message_rejected PASSED [ 42%]
student-tests/api/test_negative.py::test_sender_id_not_accepted PASSED [ 42%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body0] PASSED [ 43%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body1] PASSED [ 43%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body2] PASSED [ 44%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body3] PASSED [ 44%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body4] PASSED [ 44%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body5] PASSED [ 45%]
student-tests/api/test_negative.py::test_creator_must_be_member PASSED [ 45%]
student-tests/api/test_negative.py::test_unknown_member_rejected PASSED [ 46%]
student-tests/api/test_negative.py::test_bad_chat_id_in_path PASSED [ 46%]
student-tests/api/test_operability.py::test_health_needs_no_identity PASSED [ 46%]
student-tests/api/test_operability.py::test_every_response_carries_request_id PASSED [ 47%]
student-tests/api/test_operability.py::test_client_request_id_is_preserved PASSED [ 47%]
student-tests/api/test_operability.py::test_unknown_public_route_is_404 PASSED [ 48%]
student-tests/api/test_operability.py::test_unknown_protected_route_needs_identity PASSED [ 48%]
student-tests/api/test_operability.py::test_method_not_allowed_is_hidden PASSED [ 48%]
student-tests/api/test_operability.py::test_logs_do_not_contain_message_text PASSED [ 49%]
student-tests/api/test_operability.py::test_log_lines_are_json PASSED [ 49%]
student-tests/api/test_operability.py::test_body_limit_returns_413 PASSED [ 50%]
student-tests/api/test_operability.py::test_chunked_body_is_limited_too PASSED [ 50%]
student-tests/api/test_operability.py::test_ready_turns_unavailable_without_database PASSED [ 51%]
student-tests/api/test_operability.py::test_protected_request_is_503_not_401_without_database PASSED [ 51%]
student-tests/api/test_operability.py::test_state_survives_new_process PASSED [ 51%]
student-tests/api/test_operability.py::test_logs_do_not_contain_credentials PASSED [ 52%]
student-tests/api/test_pagination.py::test_full_walk_has_no_gaps_or_repeats PASSED [ 52%]
student-tests/api/test_pagination.py::test_limit_may_change_between_pages PASSED [ 53%]
student-tests/api/test_pagination.py::test_last_page_closes_history PASSED [ 53%]
student-tests/api/test_pagination.py::test_cursor_is_shared_between_members PASSED [ 53%]
student-tests/api/test_pagination.py::test_cursor_from_another_chat_is_rejected PASSED [ 54%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[garbage] PASSED [ 54%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[1.2.3.4] PASSED [ 55%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[%20] PASSED [ 55%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[] PASSED [ 55%]
student-tests/api/test_pagination.py::test_limit_out_of_range[0] PASSED [ 56%]
student-tests/api/test_pagination.py::test_limit_out_of_range[-1] PASSED [ 56%]
student-tests/api/test_cache.py::test_fill_racing_with_logout_does_not_revive_token PASSED [ 11%]
student-tests/api/test_cache.py::test_flushall_loses_nothing PASSED [ 11%]
student-tests/api/test_cache.py::test_unreachable_cache_is_bypassed_without_anonymous_access PASSED [ 12%]
student-tests/api/test_concurrency.py::test_hundred_messages_from_ten_clients PASSED [ 12%]
student-tests/api/test_concurrency.py::test_history_follows_the_clock_but_never_moves_back PASSED [ 12%]
student-tests/api/test_concurrency.py::test_parallel_registration_keeps_username_unique PASSED [ 13%]
student-tests/api/test_concurrency.py::test_parallel_chat_creation_is_atomic PASSED [ 13%]
student-tests/api/test_consistency.py::test_registration_is_visible_to_chats_immediately PASSED [ 14%]
student-tests/api/test_consistency.py::test_parallel_registrations_are_all_usable_as_members PASSED [ 14%]
student-tests/api/test_consistency.py::test_rejected_registration_leaves_no_trace PASSED [ 14%]
student-tests/api/test_consistency.py::test_failed_chat_creation_rolls_back_both_tables PASSED [ 15%]
student-tests/api/test_consistency.py::test_rejected_message_does_not_enter_history PASSED [ 15%]
student-tests/api/test_consistency.py::test_confirmed_write_is_visible_to_next_read PASSED [ 15%]
student-tests/api/test_consistency.py::test_parallel_writes_across_zones_keep_counts_consistent PASSED [ 16%]
student-tests/api/test_consistency.py::test_chat_membership_survives_parallel_reads_and_writes PASSED [ 16%]
student-tests/api/test_drain.py::test_draining_replica_is_not_ready_but_alive PASSED [ 16%]
student-tests/api/test_drain.py::test_sigterm_leaves_rotation_then_closes_and_cancels_stuck_requests PASSED [ 17%]
student-tests/api/test_events.py::test_event_has_no_message_text PASSED [ 17%]
student-tests/api/test_events.py::test_every_subscriber_receives_event PASSED [ 18%]
student-tests/api/test_events.py::test_failing_subscriber_does_not_block_others PASSED [ 18%]
student-tests/api/test_events.py::test_queue_overflow_drops_events_without_raising PASSED [ 18%]
student-tests/api/test_events.py::test_publication_does_not_delay_response PASSED [ 19%]
student-tests/api/test_events.py::test_null_logger_hides_everything PASSED [ 19%]
student-tests/api/test_idempotency.py::test_replay_returns_the_same_message PASSED [ 19%]
student-tests/api/test_idempotency.py::test_same_json_in_other_layout_is_a_replay PASSED [ 20%]
student-tests/api/test_idempotency.py::test_other_body_with_same_key_conflicts PASSED [ 20%]
student-tests/api/test_idempotency.py::test_missing_key_is_rejected PASSED [ 21%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[0] PASSED [ 21%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[1] PASSED [ 21%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[2] PASSED [ 22%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[3] PASSED [ 22%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[4] PASSED [ 22%]
student-tests/api/test_idempotency.py::test_malformed_key_is_rejected[5] PASSED [ 23%]
student-tests/api/test_idempotency.py::test_rejected_attempt_does_not_take_the_key PASSED [ 23%]
student-tests/api/test_idempotency.py::test_key_is_scoped_by_user_and_chat PASSED [ 23%]
student-tests/api/test_idempotency.py::test_replay_checks_session_and_access_again PASSED [ 24%]
student-tests/api/test_idempotency.py::test_expired_key_starts_over PASSED [ 24%]
student-tests/api/test_idempotency.py::test_concurrent_retries_through_two_replicas_store_one_message PASSED [ 25%]
student-tests/api/test_instance.py::test_every_response_names_the_replica PASSED [ 25%]
student-tests/api/test_instance.py::test_rejected_body_names_the_replica PASSED [ 25%]
student-tests/api/test_instance.py::test_unhandled_error_names_the_replica PASSED [ 26%]
student-tests/api/test_instance.py::test_replica_defaults_to_container_hostname PASSED [ 26%]
student-tests/api/test_migrations.py::test_migrations_are_ordered_and_versioned PASSED [ 26%]
student-tests/api/test_migrations.py::test_fresh_schema_matches_models PASSED [ 27%]
student-tests/api/test_migrations.py::test_rerun_changes_nothing PASSED [ 27%]
student-tests/api/test_migrations.py::test_legacy_upgrade_preserves_every_row[1] PASSED [ 28%]
student-tests/api/test_migrations.py::test_legacy_upgrade_preserves_every_row[2] PASSED [ 28%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[DROP INDEX messages_history_idx] PASSED [ 28%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE messages DROP CONSTRAINT messages_chat_id_sender_id_fkey] PASSED [ 29%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE users DROP CONSTRAINT users_username_format] PASSED [ 29%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE users ALTER COLUMN display_name TYPE varchar] PASSED [ 29%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE users ALTER COLUMN username TYPE text COLLATE "C"] PASSED [ 30%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE sessions SET UNLOGGED] PASSED [ 30%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[ALTER TABLE sessions ALTER COLUMN expires_at DROP NOT NULL] PASSED [ 30%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[UPDATE schema_migrations SET checksum = 'tampered' WHERE version = '0001_init'] PASSED [ 31%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[DELETE FROM schema_migrations WHERE version = '0001_init'] PASSED [ 31%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[UPDATE schema_migrations SET version = 'unknown' WHERE version = '0002_idempotency_keys'] PASSED [ 32%]
student-tests/api/test_migrations.py::test_legacy_drift_is_refused_without_stamping[DROP TABLE schema_migrations] PASSED [ 32%]
student-tests/api/test_migrations.py::test_unknown_revision_is_refused PASSED [ 32%]
student-tests/api/test_migrations.py::test_simultaneous_migration_processes_serialize[False] PASSED [ 33%]
student-tests/api/test_migrations.py::test_simultaneous_migration_processes_serialize[True] PASSED [ 33%]
student-tests/api/test_migrations.py::test_sender_must_be_member_even_bypassing_api PASSED [ 33%]
student-tests/api/test_migrations.py::test_key_needs_a_member_and_a_message PASSED [ 34%]
student-tests/api/test_migrations.py::test_failed_revision_rolls_back_ddl_and_version PASSED [ 34%]
student-tests/api/test_negative.py::test_malformed_json PASSED [ 35%]
student-tests/api/test_negative.py::test_unexpected_field PASSED [ 35%]
student-tests/api/test_negative.py::test_wrong_types PASSED [ 35%]
student-tests/api/test_negative.py::test_invalid_registration[body0] PASSED [ 36%]
student-tests/api/test_negative.py::test_invalid_registration[body1] PASSED [ 36%]
student-tests/api/test_negative.py::test_invalid_registration[body2] PASSED [ 36%]
student-tests/api/test_negative.py::test_invalid_registration[body3] PASSED [ 37%]
student-tests/api/test_negative.py::test_invalid_registration[body4] PASSED [ 37%]
student-tests/api/test_negative.py::test_invalid_registration[body5] PASSED [ 38%]
student-tests/api/test_negative.py::test_invalid_registration[body6] PASSED [ 38%]
student-tests/api/test_negative.py::test_invalid_registration[body7] PASSED [ 38%]
student-tests/api/test_negative.py::test_invalid_registration[body8] PASSED [ 39%]
student-tests/api/test_negative.py::test_invalid_registration[body9] PASSED [ 39%]
student-tests/api/test_negative.py::test_invalid_registration[body10] PASSED [ 39%]
student-tests/api/test_negative.py::test_duplicate_username PASSED [ 40%]
student-tests/api/test_negative.py::test_missing_identity PASSED [ 40%]
student-tests/api/test_negative.py::test_invalid_bearer[] PASSED [ 40%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer] PASSED [ 41%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer ] PASSED [ 41%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer not a token] PASSED [ 42%]
student-tests/api/test_negative.py::test_invalid_bearer[Bearer xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 42%]
student-tests/api/test_negative.py::test_invalid_bearer[Token abcdef] PASSED [ 42%]
student-tests/api/test_negative.py::test_invalid_bearer[11111111-1111-4111-8111-111111111111] PASSED [ 43%]
student-tests/api/test_negative.py::test_user_id_header_alone_is_ignored PASSED [ 43%]
student-tests/api/test_negative.py::test_identity_checked_before_body PASSED [ 43%]
student-tests/api/test_negative.py::test_empty_message_rejected PASSED [ 44%]
student-tests/api/test_negative.py::test_long_message_rejected PASSED [ 44%]
student-tests/api/test_negative.py::test_sender_id_not_accepted PASSED [ 45%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body0] PASSED [ 45%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body1] PASSED [ 45%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body2] PASSED [ 46%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body3] PASSED [ 46%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body4] PASSED [ 46%]
student-tests/api/test_negative.py::test_invalid_chat_creation[body5] PASSED [ 47%]
student-tests/api/test_negative.py::test_creator_must_be_member PASSED [ 47%]
student-tests/api/test_negative.py::test_unknown_member_rejected PASSED [ 47%]
student-tests/api/test_negative.py::test_bad_chat_id_in_path PASSED [ 48%]
student-tests/api/test_operability.py::test_health_needs_no_identity PASSED [ 48%]
student-tests/api/test_operability.py::test_every_response_carries_request_id PASSED [ 49%]
student-tests/api/test_operability.py::test_client_request_id_is_preserved PASSED [ 49%]
student-tests/api/test_operability.py::test_unknown_public_route_is_404 PASSED [ 49%]
student-tests/api/test_operability.py::test_unknown_protected_route_needs_identity PASSED [ 50%]
student-tests/api/test_operability.py::test_method_not_allowed_is_hidden PASSED [ 50%]
student-tests/api/test_operability.py::test_logs_do_not_contain_message_text PASSED [ 50%]
student-tests/api/test_operability.py::test_log_lines_are_json PASSED [ 51%]
student-tests/api/test_operability.py::test_body_limit_returns_413 PASSED [ 51%]
student-tests/api/test_operability.py::test_chunked_body_is_limited_too PASSED [ 52%]
student-tests/api/test_operability.py::test_ready_turns_unavailable_without_database PASSED [ 52%]
student-tests/api/test_operability.py::test_protected_request_is_503_not_401_without_database PASSED [ 52%]
student-tests/api/test_operability.py::test_state_survives_new_process PASSED [ 53%]
student-tests/api/test_operability.py::test_logs_do_not_contain_credentials PASSED [ 53%]
student-tests/api/test_pagination.py::test_full_walk_has_no_gaps_or_repeats PASSED [ 53%]
student-tests/api/test_pagination.py::test_limit_may_change_between_pages PASSED [ 54%]
student-tests/api/test_pagination.py::test_last_page_closes_history PASSED [ 54%]
student-tests/api/test_pagination.py::test_cursor_is_shared_between_members PASSED [ 54%]
student-tests/api/test_pagination.py::test_cursor_from_another_chat_is_rejected PASSED [ 55%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[garbage] PASSED [ 55%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[1.2.3.4] PASSED [ 56%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[%20] PASSED [ 56%]
student-tests/api/test_pagination.py::test_broken_cursor_is_rejected[] PASSED [ 56%]
student-tests/api/test_pagination.py::test_limit_out_of_range[0] PASSED [ 57%]
student-tests/api/test_pagination.py::test_limit_out_of_range[-1] PASSED [ 57%]
student-tests/api/test_pagination.py::test_limit_out_of_range[101] PASSED [ 57%]
student-tests/api/test_pagination.py::test_limit_out_of_range[abc] PASSED [ 57%]
student-tests/api/test_pagination.py::test_limit_out_of_range[abc] PASSED [ 58%]
student-tests/api/test_pagination.py::test_limit_out_of_range[1.5] PASSED [ 58%]
student-tests/api/test_pagination.py::test_limit_out_of_range[] PASSED [ 58%]
student-tests/api/test_pagination.py::test_default_limit_is_50 PASSED [ 58%]
student-tests/api/test_pagination.py::test_limit_out_of_range[] PASSED [ 59%]
student-tests/api/test_pagination.py::test_default_limit_is_50 PASSED [ 59%]
student-tests/api/test_pagination.py::test_unknown_query_parameter_is_ignored PASSED [ 59%]
student-tests/api/test_pagination.py::test_chat_list_pagination PASSED [ 59%]
student-tests/api/test_pagination.py::test_chat_list_pagination PASSED [ 60%]
student-tests/api/test_pool.py::test_exhausted_pool_answers_503_in_bounded_time PASSED [ 60%]
student-tests/api/test_pool.py::test_statement_timeout_is_set_on_connections PASSED [ 60%]
student-tests/api/test_sessions.py::test_login_returns_session_for_registered_user PASSED [ 60%]
student-tests/api/test_sessions.py::test_registration_response_hides_password PASSED [ 61%]
student-tests/api/test_sessions.py::test_password_is_stored_as_argon2id PASSED [ 61%]
student-tests/api/test_sessions.py::test_session_stores_only_token_digest PASSED [ 62%]
student-tests/api/test_sessions.py::test_wrong_password_and_unknown_user_look_the_same PASSED [ 62%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers0] PASSED [ 62%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers1] PASSED [ 63%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers2] PASSED [ 63%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers3] PASSED [ 64%]
student-tests/api/test_sessions.py::test_password_with_colon_logs_in PASSED [ 64%]
student-tests/api/test_sessions.py::test_login_with_body_is_rejected PASSED [ 65%]
student-tests/api/test_sessions.py::test_basic_on_business_endpoint_gets_bearer_challenge PASSED [ 65%]
student-tests/api/test_sessions.py::test_user_id_header_does_not_override_owner PASSED [ 65%]
student-tests/api/test_sessions.py::test_authentication_precedes_validation PASSED [ 66%]
student-tests/api/test_sessions.py::test_logout_revokes_only_current_session PASSED [ 66%]
student-tests/api/test_sessions.py::test_short_ttl_session_expires PASSED [ 67%]
student-tests/api/test_sessions.py::test_expired_sessions_are_purged_on_next_login PASSED [ 67%]
student-tests/api/test_sessions.py::test_chat_routes_require_bearer PASSED [ 67%]
student-tests/api/test_timeout.py::test_timeout_returns_unavailable_error_body PASSED [ 68%]
student-tests/api/test_timeout.py::test_timeout_does_not_break_following_requests PASSED [ 68%]
student-tests/api/test_timeout.py::test_timeout_is_logged_without_message_text PASSED [ 69%]
student-tests/api/test_timeout.py::test_normal_request_is_not_affected_by_timeout PASSED [ 69%]
student-tests/api/test_timeout.py::test_slow_event_handler_does_not_trigger_timeout PASSED [ 69%]
student-tests/api/test_timeout.py::test_healthcheck_stays_fast PASSED [ 70%]
student-tests/api/test_wire_format.py::test_created_at_is_rfc3339_utc[whole-second] PASSED [ 70%]
student-tests/api/test_wire_format.py::test_created_at_is_rfc3339_utc[microseconds] PASSED [ 71%]
student-tests/unit/test_authentication.py::test_basic_splits_on_first_colon PASSED [ 71%]
student-tests/unit/test_authentication.py::test_basic_decodes_utf8_password PASSED [ 72%]
student-tests/unit/test_authentication.py::test_basic_scheme_is_case_insensitive PASSED [ 72%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[] PASSED [ 72%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic] PASSED [ 73%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic ] PASSED [ 73%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic !!!not-base64!!!] PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic YWxpY2U] PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic bm8tY29sb24taGVyZQ==] PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic 0LDQu9C40YHQsDrQv9Cw0YDQvtC70Yw=] PASSED [ 75%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic YWxpY2U6//4=] PASSED [ 75%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Bearer YWxpY2U6c2VjcmV0] PASSED [ 76%]
student-tests/unit/test_authentication.py::test_bearer_accepts_token68 PASSED [ 76%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[] PASSED [ 76%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer] PASSED [ 77%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer ] PASSED [ 77%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer a b] PASSED [ 78%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Basic abc] PASSED [ 78%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 79%]
student-tests/unit/test_authentication.py::test_bearer_rejects_oversized_token PASSED [ 79%]
student-tests/unit/test_authentication.py::test_challenge_depends_only_on_path PASSED [ 79%]
student-tests/unit/test_cursor.py::test_roundtrip_preserves_key PASSED [ 80%]
student-tests/unit/test_cursor.py::test_cursor_is_opaque PASSED [ 80%]
student-tests/unit/test_cursor.py::test_cursor_from_another_scope_is_rejected PASSED [ 81%]
student-tests/unit/test_cursor.py::test_forged_cursor_is_rejected PASSED [ 81%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[] PASSED [ 81%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[garbage] PASSED [ 82%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.2.3] PASSED [ 82%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[2.1.2.3] PASSED [ 83%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.notanumber.ff.AAAA] PASSED [ 83%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.1.zz.AAAA] PASSED [ 83%]
student-tests/unit/test_cursor.py::test_tampered_payload_is_rejected PASSED [ 84%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[ab] PASSED [ 84%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa] PASSED [ 85%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[Alice] PASSED [ 85%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice-01] PASSED [ 86%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[\u0430\u043b\u0438\u0441\u0430] PASSED [ 86%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[] PASSED [ 86%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[a b] PASSED [ 87%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice\n] PASSED [ 87%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice\r\n] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_accepts_valid[abc] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_accepts_valid[a_b_9] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_accepts_valid[aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa] PASSED [ 89%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[] PASSED [ 89%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[ ] PASSED [ 90%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[\t\n] PASSED [ 90%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 90%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[] PASSED [ 91%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[ ] PASSED [ 91%]
student-tests/api/test_pool.py::test_idle_session_does_not_acquire_connection PASSED [ 61%]
student-tests/api/test_pool.py::test_closed_idle_connection_is_replaced_before_registration PASSED [ 61%]
student-tests/api/test_pool.py::test_readiness_timeout_releases_waiter PASSED [ 61%]
student-tests/api/test_pool.py::test_server_statement_timeout_returns_connection PASSED [ 62%]
student-tests/api/test_pool.py::test_unit_of_work_persists_sessions_and_events_only_on_commit[False] PASSED [ 62%]
student-tests/api/test_pool.py::test_unit_of_work_persists_sessions_and_events_only_on_commit[True] PASSED [ 63%]
student-tests/api/test_pool.py::test_integrity_failure_rolls_back_and_keeps_pool_usable PASSED [ 63%]
student-tests/api/test_pool.py::test_blocked_message_times_out_without_taking_key[database] PASSED [ 63%]
student-tests/api/test_pool.py::test_blocked_message_times_out_without_taking_key[request] PASSED [ 64%]
student-tests/api/test_pool.py::test_message_integrity_failure_rolls_back_receipt_and_timestamp PASSED [ 64%]
student-tests/api/test_sessions.py::test_login_returns_session_for_registered_user PASSED [ 64%]
student-tests/api/test_sessions.py::test_registration_response_hides_password PASSED [ 65%]
student-tests/api/test_sessions.py::test_password_is_stored_as_argon2id PASSED [ 65%]
student-tests/api/test_sessions.py::test_session_stores_only_token_digest PASSED [ 66%]
student-tests/api/test_sessions.py::test_wrong_password_and_unknown_user_look_the_same PASSED [ 66%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers0] PASSED [ 66%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers1] PASSED [ 67%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers2] PASSED [ 67%]
student-tests/api/test_sessions.py::test_login_without_valid_basic[headers3] PASSED [ 67%]
student-tests/api/test_sessions.py::test_password_with_colon_logs_in PASSED [ 68%]
student-tests/api/test_sessions.py::test_login_with_body_is_rejected PASSED [ 68%]
student-tests/api/test_sessions.py::test_basic_on_business_endpoint_gets_bearer_challenge PASSED [ 69%]
student-tests/api/test_sessions.py::test_user_id_header_does_not_override_owner PASSED [ 69%]
student-tests/api/test_sessions.py::test_authentication_precedes_validation PASSED [ 69%]
student-tests/api/test_sessions.py::test_logout_revokes_only_current_session PASSED [ 70%]
student-tests/api/test_sessions.py::test_short_ttl_session_expires PASSED [ 70%]
student-tests/api/test_sessions.py::test_expired_sessions_are_purged_on_next_login PASSED [ 70%]
student-tests/api/test_sessions.py::test_chat_routes_require_bearer PASSED [ 71%]
student-tests/api/test_timeout.py::test_timeout_returns_unavailable_error_body PASSED [ 71%]
student-tests/api/test_timeout.py::test_timeout_does_not_break_following_requests PASSED [ 71%]
student-tests/api/test_timeout.py::test_timeout_is_logged_without_message_text PASSED [ 72%]
student-tests/api/test_timeout.py::test_normal_request_is_not_affected_by_timeout PASSED [ 72%]
student-tests/api/test_timeout.py::test_slow_event_handler_does_not_trigger_timeout PASSED [ 73%]
student-tests/api/test_timeout.py::test_healthcheck_stays_fast PASSED [ 73%]
student-tests/api/test_wire_format.py::test_created_at_is_rfc3339_utc[whole-second] PASSED [ 73%]
student-tests/api/test_wire_format.py::test_created_at_is_rfc3339_utc[microseconds] PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_splits_on_first_colon PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_decodes_utf8_password PASSED [ 74%]
student-tests/unit/test_authentication.py::test_basic_scheme_is_case_insensitive PASSED [ 75%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[] PASSED [ 75%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic] PASSED [ 76%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic ] PASSED [ 76%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic !!!not-base64!!!] PASSED [ 76%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic YWxpY2U] PASSED [ 77%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic bm8tY29sb24taGVyZQ==] PASSED [ 77%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic 0LDQu9C40YHQsDrQv9Cw0YDQvtC70Yw=] PASSED [ 77%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Basic YWxpY2U6//4=] PASSED [ 78%]
student-tests/unit/test_authentication.py::test_basic_rejects_malformed[Bearer YWxpY2U6c2VjcmV0] PASSED [ 78%]
student-tests/unit/test_authentication.py::test_bearer_accepts_token68 PASSED [ 78%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[] PASSED [ 79%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer] PASSED [ 79%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer ] PASSED [ 80%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Bearer a b] PASSED [ 80%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[Basic abc] PASSED [ 80%]
student-tests/unit/test_authentication.py::test_bearer_rejects_malformed[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 81%]
student-tests/unit/test_authentication.py::test_bearer_rejects_oversized_token PASSED [ 81%]
student-tests/unit/test_authentication.py::test_challenge_depends_only_on_path PASSED [ 81%]
student-tests/unit/test_cursor.py::test_roundtrip_preserves_key PASSED [ 82%]
student-tests/unit/test_cursor.py::test_cursor_is_opaque PASSED [ 82%]
student-tests/unit/test_cursor.py::test_cursor_from_another_scope_is_rejected PASSED [ 83%]
student-tests/unit/test_cursor.py::test_forged_cursor_is_rejected PASSED [ 83%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[] PASSED [ 83%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[garbage] PASSED [ 84%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.2.3] PASSED [ 84%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[2.1.2.3] PASSED [ 84%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.notanumber.ff.AAAA] PASSED [ 85%]
student-tests/unit/test_cursor.py::test_broken_cursor_is_rejected[1.1.zz.AAAA] PASSED [ 85%]
student-tests/unit/test_cursor.py::test_tampered_payload_is_rejected PASSED [ 85%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[ab] PASSED [ 86%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa] PASSED [ 86%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[Alice] PASSED [ 87%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice-01] PASSED [ 87%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[\u0430\u043b\u0438\u0441\u0430] PASSED [ 87%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[a b] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice\n] PASSED [ 88%]
student-tests/unit/test_domain.py::test_username_rejects_invalid[alice\r\n] PASSED [ 89%]
student-tests/unit/test_domain.py::test_username_accepts_valid[abc] PASSED [ 89%]
student-tests/unit/test_domain.py::test_username_accepts_valid[a_b_9] PASSED [ 90%]
student-tests/unit/test_domain.py::test_username_accepts_valid[aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa] PASSED [ 90%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[] PASSED [ 90%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[ ] PASSED [ 91%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[\t\n] PASSED [ 91%]
student-tests/unit/test_domain.py::test_display_name_rejects_invalid[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 91%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[] PASSED [ 92%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[ ] PASSED [ 92%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[xxxxxxxxxxx] PASSED [ 92%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 92%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx] PASSED [ 93%]
student-tests/unit/test_domain.py::test_password_rejects_invalid[\t\t\t\t\t\t\t\t\t\t\t\t] PASSED [ 93%]
student-tests/unit/test_domain.py::test_password_counts_code_points[xxxxxxxxxxxx] PASSED [ 93%]
student-tests/unit/test_domain.py::test_password_counts_code_points[\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f] PASSED [ 93%]
student-tests/unit/test_domain.py::test_password_counts_code_points[xxxxxxxxxxxx] PASSED [ 94%]
student-tests/unit/test_domain.py::test_password_counts_code_points[\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f\u043f] PASSED [ 94%]
student-tests/unit/test_domain.py::test_password_counts_code_points[\u043f\u0430\u0440\u043e\u043b\u044c:\u0441:\u0434\u0432\u043e\u0435\u0442\u043e\u0447\u0438\u0435\u043c] PASSED [ 94%]
student-tests/unit/test_domain.py::test_password_counts_code_points[\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b] PASSED [ 94%]
student-tests/unit/test_domain.py::test_password_counts_code_points[\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b\U0001f44b] PASSED [ 95%]
student-tests/unit/test_domain.py::test_password_is_not_printed PASSED [ 95%]
student-tests/unit/test_domain.py::test_session_token_is_opaque_and_stored_as_digest PASSED [ 95%]
student-tests/unit/test_domain.py::test_session_tokens_are_unique PASSED [ 95%]
student-tests/unit/test_domain.py::test_session_tokens_are_unique PASSED [ 96%]
student-tests/unit/test_domain.py::test_message_text_counts_code_points_not_bytes PASSED [ 96%]
student-tests/unit/test_domain.py::test_message_text_rejects_blank PASSED [ 96%]
student-tests/unit/test_domain.py::test_message_text_rejects_blank PASSED [ 97%]
student-tests/unit/test_domain.py::test_chat_requires_creator_in_members PASSED [ 97%]
student-tests/unit/test_domain.py::test_chat_rejects_duplicate_members PASSED [ 97%]
student-tests/unit/test_domain.py::test_chat_rejects_more_than_hundred_members PASSED [ 97%]
student-tests/unit/test_domain.py::test_chat_rejects_more_than_hundred_members PASSED [ 98%]
student-tests/unit/test_domain.py::test_receipt_replays_only_the_same_request PASSED [ 98%]
student-tests/unit/test_domain.py::test_posted_message_describes_itself PASSED [ 98%]
student-tests/unit/test_domain.py::test_user_registration_emits_event PASSED [ 99%]
student-tests/unit/test_domain.py::test_clock_is_strictly_increasing PASSED [ 99%]
student-tests/unit/test_timeouts.py::test_timeouts_shrink_inwards_and_shutdown_fits_the_stop_budget PASSED [100%]
===================== 243 passed, 12 deselected in 20.60s ======================
exit=0
$ .venv/bin/pytest -s -q student-tests/api/test_drain.py student-tests/unit/test_timeouts.py # SIGTERM-окно и цепочка таймаутов
.окно: ready/live (503, 200), порт закрыт через 1.17 с, выход 2.43 с
запрос, принятый до SIGTERM и дописанный после закрытия порта: HTTP/1.1 201 Created
запрос, тело которого так и не пришло: HTTP/1.1 503 Service Unavailable
content-type application/json, тело {'error': {'code': 'unavailable', 'message': 'Сервис временно недоступен', 'request_id': '83cd403af06b44c1ac1fbf05f09908b4'}}
.обнаружение 1.5 с (зависание 3.5 с), окно 2.0 с, дообработка 3.0 с, остановка 6.0 с, хук 7.0 с, stop_grace_period 8.0 с; LB server 10.0 с > запрос 8.0 с > БД 3.0 с; readiness 0.8 с < check 1.0 с
.
3 passed in 4.14s
exit=0
===================== 271 passed, 12 deselected in 29.48s ======================
exit_code: 0 elapsed_seconds: 30.076
@@ -127,5 +127,7 @@ top-операторы SQLAlchemy, разница в RPS/латентности,
[Alembic async cookbook](https://github.com/sqlalchemy/alembic/blob/rel_1_16_5/docs/build/cookbook.rst).
Миграционные тесты проверяют свежую БД, переход с 0001/0002 с сохранением каждой строки, повреждения схемы,
неизвестную ревизию, повторный и конкурентный запуск. Пул проверяется на rollback, таймаутах и отмене запроса.
Полный стенд уровней 3/4, evidence и измерения трека 1 выполняются следующими этапами; прежние цифры
не подтверждают производительность SQLAlchemy. Change остаётся активным до этих прогонов и обновления отчёта.
Уровень «3» подтверждён этапом grade3 на `0a1f48bd73e5780c732356880c23fdb476bcff98`; обнаруженная регрессия закрытых соединений исправлена
в `fix-lab3-postgres-pool-recovery`. Проверка соединения добавляет обращение к БД при выдаче из пула.
Уровень «4» и измерения трека 1 остаются следующими этапами; прежние цифры не подтверждают
производительность SQLAlchemy. Change остаётся активным до этих прогонов и обновления отчёта.
@@ -20,8 +20,10 @@
## 4. Контекст и стенд
- [x] 4.1 `AGENTS.md` и `openspec/config.yaml`: стек — SQLAlchemy 2.x async + Alembic (asyncpg — драйвер), описание `migrate`; правило «SQL только параметризованный» сохранено
- [ ] 4.2 Стенд из чистого состояния: `make up` (миграции один раз), `make test`, `make lb-check`, `make retry-check`, `make test-failover ACTION_SCRIPT=scripts/stop-one.sh`, `make test-persistence ACTION_SCRIPT=scripts/restart.sh`, `make test-faults`, `make restore`; `make level4` под нагрузкой
- [ ] 4.3 `evidence-storage.sh` прогон: `evidence/{schema,migrations,kdf,secrets}.txt` на новом коде; свежие `smoke.txt`, `student-tests.txt`, `checks.txt`
- [x] 4.2 Стенд из чистого состояния: `make up` (миграции один раз), `make test`, `make lb-check`, `make retry-check`, `make test-failover ACTION_SCRIPT=scripts/stop-one.sh`, `make test-persistence ACTION_SCRIPT=scripts/restart.sh`, `make test-faults`, `make restore`
- [x] 4.3 `evidence-storage.sh` прогон: `evidence/{schema,migrations,kdf,secrets}.txt` на новом коде; свежие `smoke.txt`, `student-tests.txt`, `checks.txt`
- [ ] 4.4 Этап grade4: `make level4` под нагрузкой на SQLAlchemy, обновить соответствующие доказательства
## 5. Трек 1 и отчёт
@@ -49,3 +51,21 @@
Итоговые проверки выше выполнены после исправлений.
- Одноразовые тестовые контейнеры остановлены; существующие volumes и другие лабораторные
не изменялись. Публикаций и отправок Telegram не было.
## Результат этапа grade3 — 2026-11-05
Уровень «3» подтверждён на `0a1f48bd73e5780c732356880c23fdb476bcff98`:
новый Compose-проект с пустыми volumes, smoke, lb-check (20 × 8), retry (timeout/kill),
публичный failover каждой реплики (2.762 / 2.817 с, 0 ошибок), restore и persistence — PASS.
`make test-faults` — 12 passed, включая 40 регистраций через обе реплики после возврата БД;
`make student-test` — 271 passed, 12 deselected; check/validate/lint/lock/OpenSpec — PASS.
Схема, Alembic head и повтор без изменения строк записаны в evidence; индекс и отчёт обновлены.
Первый стендовый прогон обнаружил устаревшие соединения после PostgreSQL; исправление и регрессия
оформлены отдельным `fix-lab3-postgres-pool-recovery` (pool_pre_ping). Также устранены коллизия порта
тестового gunicorn и стартовая гонка тестовой БД. Все неуспешные прогоны сохранены в evidence.
Контейнеры обоих проектов этапа остановлены, volumes сохранены; публикаций и Telegram не было.
Задача 4.2 разделена по последовательным этапам: проверки уровня «3» завершены, `make level4`
перенесён в 4.4. Выполнено 13 из 17 задач. Задачи 4.4 и 5.1–5.3 остаются следующим этапам;
новые RPS/латентности SQLAlchemy с pre-ping пока не измерены. Change не архивируется.
@@ -1,2 +1,4 @@
schema: spec-driven
created: 2026-11-05
archived: 2026-11-05
lab: 3
@@ -2,15 +2,23 @@
- [x] 1.1 Воспроизвести первый `503` после закрытия простаивающего соединения отдельным тестом `test_pool.py`, сохранить исходное падение
- [x] 1.2 Включить проверку соединения до выдачи из пула; целевой тест и `make student-test`, `make lint`, `make check` проходят
- [ ] 1.3 Изолировать порт gunicorn в `test_drain.py` от LB и ограничить ожидание закрытия listener; тест и полный набор проходят при работающем стенде
- [x] 1.3 Изолировать порт gunicorn в `test_drain.py` от LB и ограничить ожидание закрытия listener; тест и полный набор проходят при работающем стенде
- [x] 1.4 Дождаться готовности тестового PostgreSQL при SQLSTATE 57P03 через существующий классификатор временных отказов; полный набор проходит
## 2. Реальный стенд уровня «3»
- [ ] 2.1 Усилить `test_faults.py`: новые регистрации после возвращения PostgreSQL на обеих репликах, API не перезапускается; пересобрать образ, `make test-faults` проходит
- [ ] 2.2 На исправленном коде переснять smoke, балансировку и гонки, потерянный ответ, failover каждой реплики с `docker compose ps -a` и restore, persistence, схему и повтор Alembic
- [x] 2.1 Усилить `test_faults.py`: новые регистрации после возвращения PostgreSQL на обеих репликах, API не перезапускается; пересобрать образ, `make test-faults` проходит
- [x] 2.2 На исправленном коде переснять smoke, балансировку и гонки, потерянный ответ, failover каждой реплики с `docker compose ps -a` и restore, persistence, схему и повтор Alembic
## 3. Доказательства и завершение
- [ ] 3.1 Обновить `REPORT.md`, `evidence/README.md` и состояние исходного change; отделить актуальный уровень «3» от исторических «4»/трека, сохранить дату/SHA, ошибки и цену решения
- [ ] 3.2 `make check`, `make validate`, `make lint`, `make student-test`, `openspec validate --all --strict`; синхронизировать дельту и архивировать только это завершённое исправление; остановить свой стенд без удаления volumes
- [x] 3.1 Обновить `REPORT.md`, `evidence/README.md` и состояние исходного change; отделить актуальный уровень «3» от исторических «4»/трека, сохранить дату/SHA, ошибки и цену решения
- [x] 3.2 `make check`, `make validate`, `make lint`, `make student-test`, `openspec validate --all --strict`; остановить свой стенд без удаления volumes
## Результат
Код `0a1f48bd73e5780c732356880c23fdb476bcff98`, 2026-11-05: 271 passed и 12 passed
на реальном Docker-стенде. Smoke, два failover, persistence, гонки ключа и потерянный ответ — PASS;
check/validate/lint/lock/OpenSpec — PASS. Доказательства и исходные ошибки перечислены в
`evidence/README.md`; оба стенда этапа остановлены без удаления volumes. Цена pre-ping указана
в отчёте, измерения трека остаются исходному change принятия SQLAlchemy/Alembic.
@@ -25,12 +25,23 @@
### Requirement: Восстановление без рестарта API
После возвращения PostgreSQL API SHALL восстанавливать обслуживание без перезапуска своего процесса за счёт переподключения пула.
После возвращения PostgreSQL API SHALL восстанавливать чтение и запись без перезапуска своего процесса за счёт переподключения пула. Закрытое сервером простаивающее соединение SHALL заменяться до выполнения новой операции; его повторная выдача SHALL NOT приводить к `503` при доступной БД. Уже начатые операции SHALL NOT автоматически повторяться. Требование сохраняет минимум lab2 и критерии 3.1/3.5 `README.md`.
#### Scenario: PostgreSQL снова запущен
- **WHEN** сервис `postgres` запущен после остановки
- **THEN** в течение 30 с `/health/ready` отвечает `200`, а прежний токен читает свои данные
- **AND** после возвращения всех реплик в ротацию валидные новые `POST /api/v1/users` через LB возвращают `201`, без перезапуска API
#### Scenario: Сервер закрыл простаивающее соединение
- **WHEN** PostgreSQL доступен, но закрыл ранее возвращённое в пул соединение, и приходит валидный `POST /api/v1/users`
- **THEN** запрос возвращает `201` с `User`, `X-Request-Id` и `X-Instance-Id`; создаётся ровно один пользователь
#### Scenario: БД ещё недоступна
- **WHEN** соединение закрыто и PostgreSQL всё ещё недоступен
- **THEN** запрос получает ограниченную ошибку `503` с `error.code=unavailable`, `error.message`, `error.request_id`, `X-Request-Id` и `X-Instance-Id` согласно общему контракту
### Requirement: Ограниченный пул соединений