docs: repeat the clean clone check on the fixed code
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
@@ -4,12 +4,12 @@
|
||||
- Целевая оценка 5; выбранный трек 5: трек 1 «Цена масштабирования» (серии сняты, change `scaling-bench`; одно подтверждённое улучшение — пул без переполнения, change `scaling-improvement`, засчитано с оговоркой: раздел «Улучшение по найденному узкому месту: пул без переполнения»)
|
||||
- Commit/PR: ветка `solution/bvt2301-safronov`, PR «ЛР 3 — БВТ2301 —
|
||||
Сафронов — на 5» — ссылка на PR после публикации (push и PR делает
|
||||
автор). Из чистого clone проверен commit `dbb9150` (2026-10-13,
|
||||
`evidence/tests/clean-clone-final.md`). После него менялись только
|
||||
`.gitignore` (исключение для журналов меток `evidence/**/raw/*.log`),
|
||||
сами журналы, `REPORT.md`, `KNOWN_ISSUES.md` и evidence; код
|
||||
автор). Из чистого clone проверен commit `8fa12f5` (2026-10-13, код
|
||||
change `fix-known-issues`, `evidence/tests/clean-clone-final.md`).
|
||||
После него менялись только документы: `REPORT.md`,
|
||||
`evidence/tests/clean-clone-final.md` и файлы change; код
|
||||
приложения, `Dockerfile`, `pyproject.toml`, `uv.lock`, compose,
|
||||
конфигурации, скрипты и `bench/` — нет.
|
||||
конфигурации, скрипты, тесты и `bench/` — нет.
|
||||
- Использованные источники, библиотеки и помощь ИИ: раздел «Источники,
|
||||
библиотеки и использование ИИ» в конце отчёта.
|
||||
|
||||
@@ -658,7 +658,7 @@ SHA-256 тела; `created_at` с индексом; `CHECK` формата и д
|
||||
| `X-Instance-Id` на каждом ответе, `instance_id` в журнале | тесты `api-conventions`, `curl`, `docker compose logs api` | заголовок у 2xx, 4xx, health, 404, 405, 500; значение = короткий ID контейнера; 85 из 85 записей журнала с `instance_id`, включая старт и shutdown; ключей и текста в журнале нет | `evidence/idempotency/instance-id.md` |
|
||||
| Стенд лабы 3 не трогает данные лабы 2 | `make run_docker`, `make wipe_data`, снова `make run_docker`; `docker volume inspect` до и после | `wipe_data` удалил только контейнеры, сеть и volume `mtusi-lab3`; `mtusi-lab2_postgres_data` с прежней датой создания | `evidence/tests/stand-lab3.md` |
|
||||
| Сборка из чистого clone | `git clone`, `docker build -t mtusi-messenger:lab3 .` до `make env_setup`; стенд на этом образе, `make test` | сборка без `.env` и `config.toml`, в образе их нет, процесс от UID 10001; `PASS: lab3 public API scenario` | `evidence/tests/clean-clone.md` |
|
||||
| Итоговая проверка из чистого clone по разделу «Запуск из чистого clone» (COURSE.md, «Что сдавать»: PR должен собираться из чистого clone по инструкции автора) | настоящий `git clone` commit `dbb9150` (2026-10-13), проект `mtusi-lab3` на портах по умолчанию: `make env_setup`, `make run_docker`, `make check`, `make validate`, `make test`, `make instances` (`python3` 3.11 и системный 3.9.6), `make test-persistence`, `make test-failover` для каждой реплики (`stop`, затем `make replicas`; плюс `kill`), `make student_test`, `make failure_checks`, `make test_isolated`; `docker build --no-cache` | все команды — код 0 без правки файлов клона: `PASS` у публичных проверок, `instances: 2`, остановлены по очереди `d65d5a9a1f9d` и `417ccb2d21f7` (ID = `TARGET_INSTANCE_ID`), первая запись через 0,97–1,09 с (`stop`) и 0,22 с (`kill`), неудачных попыток 0; после `restart.sh` те же ID с новым `StartedAt` у LB, реплик, Postgres и Valkey; 131 passed через LB, 17 проверок отказов, 127 passed + 4 пропуска с причиной в изоляции; образ без `.env` и `config.toml`, UID 10001 | `evidence/tests/clean-clone-final.md` |
|
||||
| Итоговая проверка из чистого clone по разделу «Запуск из чистого clone» (COURSE.md, «Что сдавать»: PR должен собираться из чистого clone по инструкции автора) | настоящий `git clone` commit `8fa12f5` (2026-10-13, итоговый код `fix-known-issues`; прошлая проверка — `dbb9150`, в истории файла), проект `mtusi-lab3` на портах по умолчанию: `make env_setup`, `make run_docker`, `make check`, `make validate`, `make test`, `make instances` (`python3` 3.11 и системный 3.9.6), `make test-persistence`, `make test-failover` для каждой реплики (`stop`, затем `make replicas`; плюс `kill`), `make student_test`, `make failure_checks`, `make test_isolated`; `docker build --no-cache` | все команды — код 0 без правки файлов клона: `PASS` у публичных проверок, `instances: 2`, остановлены по очереди `bbddd2338014` и `4c914e2e525f` (ID = `TARGET_INSTANCE_ID`), первая запись через 0,96–1,21 с (`stop`, неудачных попыток 0) и 0,23 с (`kill`, одна попытка в полёте повторена с тем же ключом); после `restart.sh` те же ID с новым `StartedAt` у LB, реплик, Postgres и Valkey; 133 passed через LB (сверка ссылок исключений зелёная), 17 проверок отказов и журнал PostgreSQL стенда без признаков аварии, 129 passed + 4 пропуска с причиной в изоляции; образ без `.env` и `config.toml`, UID 10001 | `evidence/tests/clean-clone-final.md` |
|
||||
| Стенд `bench/`: отправки с ключом при восстановлении | `make bench_restore_quick` (самопроверка, не замер) | 1000 отправок во время backup на каждом размере, 0 неудачных; сообщений в исходной базе = подтверждённых отправок; сверка баз прошла | `evidence/tests/bench-restore-quick.md` |
|
||||
| «4»: rolling update (поочерёдная замена) проверен под нагрузкой | `make bench_rollout ROLLOUT_LABEL=baseline` (commit `9dcea0b`, код `de654a1`, хост проверен, рабочий стенд остановлен): 100 записей с ключом и 100 чтений в секунду, две реплики образа `c50b721` заменяются на образ текущего checkout тем же `scripts/rolling-update.sh`; на рабочем стенде (итоговый код `84161c0`) — `make rolling_update`, откат `COMMIT=c50b721 MIGRATE=0`, снова вперёд и две замены подряд под `tests/load.py`; быстрый профиль `make bench_rollout_quick` на `84161c0` | замена 8,9 с; **0 ошибок** из 24 002 запросов, доля успешных 1,0 в каждой секунде, p95 5 → макс. 11 мс; по шагам: новая `UP` в LB через 2,0–2,1 с после старта, дренаж старой 0,14–0,16 с, остановка 0,3–0,4 с; после вывода из LB старая не получила ни одного запроса; сообщений 12 001 = ключей 12 001. Рабочий стенд: 0 неуспешных из 21 043 / 16 687 / 18 480 / 27 278 запросов `tests/load.py`; старые реплики завершаются за 0,1 с с кодом 0 («Finished server process»); контейнеров прежних реплик после замены нет. Быстрый профиль на итоговом коде: замена 8,1 с, 0 ошибок, 7 301 = 7 301 | `evidence/rollout/baseline/summary.md`, `evidence/rollout/compatibility.md`, `evidence/tests/rolling-update-checks.md` |
|
||||
| «4»: CPU и память профилей отказа и замены (COURSE.md: CPU/RAM в отчёте о нагрузке) | `make bench_failover FAILOVER_LABEL=resources`, `make bench_rollout ROLLOUT_LABEL=resources` (код `2d267bf`, хост проверен, `Swapouts` без прироста, рабочий стенд остановлен): тот же профиль и сэмплер cgroup в режиме `scan` (0,25 CPU / 128 МиБ, без сети) на всё время нагрузки; самопроверки — быстрые профили, сторож (`docker rm -f` сэмплера посреди фазы) | `failover`, фазы 1–5: до действия реплика 0,28–0,31 ядра, PostgreSQL 0,09–0,10, ВМ 1,03–1,16 из 12; в окне отказа выжившая 0,37–0,43, цель 0 (у `pause` — 0 CPU при той же памяти); после возврата — запуск до 1,06 ядра; CPU на запрос до действия — API 2 810–3 136 мкс, PostgreSQL 432–478. `rollout`: API всего 0,57 → 0,82 ядра и 176 → 279 МиБ на пике замены (три реплики), ВМ 1,0 → 2,8 ядра на сборке; CPU на запрос до / после 2 876 / 2 895 мкс. Доступность та же, что у `baseline`: обнаружение в границах, восстановление ≤ 7 с, у замены 0 ошибок и 0 ответов старой после дренажа. Наблюдатель — 0,003 ядра, 2–3 МиБ, к стенду не обращается; сторож — код 1 с фазой, стенд убран | `evidence/failover/resources/`, `evidence/rollout/resources/` (`summary.md`, `resources.csv`, `samples.csv`), `evidence/tests/profile-resources-checks.md` |
|
||||
|
||||
@@ -3,10 +3,10 @@
|
||||
| | |
|
||||
|---|---|
|
||||
| Что проверялось | раздел `REPORT.md` «Запуск из чистого clone» — буквально, шаг за шагом, как у проверяющего |
|
||||
| Дата | 2026-10-13 11:53–12:17 UTC |
|
||||
| Commit | `dbb9150` — `git clone --branch solution/bvt2301-safronov` локального репозитория во временный каталог; рабочее дерево клона чистое, `.env`, `config.toml` и `.venv` нет. После него менялись только `.gitignore` (исключение для журналов меток), журналы `evidence/**/raw/*.log`, `REPORT.md`, `KNOWN_ISSUES.md`, evidence и этот файл. Прошлая такая проверка (commit `67b4303`, 2026-10-11) — в истории этого файла |
|
||||
| Дата | 2026-10-13 14:54–15:01 UTC |
|
||||
| Commit | `8fa12f5` — `git clone --branch solution/bvt2301-safronov` локального репозитория во временный каталог; рабочее дерево клона чистое, `.env`, `config.toml` и `.venv` нет. Это итоговый код change `fix-known-issues` (ранний обработчик SIGTERM, проверка журнала PostgreSQL стенда отказов, сверка ссылок исключений); после него менялись только этот файл, `REPORT.md` и файлы change. Прошлая такая проверка (commit `dbb9150`, 2026-10-13) — в истории этого файла |
|
||||
| Стенд | проект compose `mtusi-lab3` (имя из `docker-compose.yml`, без `COMPOSE_PROJECT_NAME`), порты по умолчанию: LB `127.0.0.1:8080`, Postgres 5433, Valkey 6380. Рабочий стенд с тем же именем проекта перед проверкой удалён вместе с volume (`docker compose down -v`), чтобы клон стартовал на пустой базе со своим паролем, как у проверяющего. После проверки стенд клона удалён (`docker compose down -v`), рабочий поднят заново `make run_docker` |
|
||||
| Хост | Docker Desktop 29.8.2, Compose v5.5.1, macOS arm64 (Apple M3 Pro); ВМ Docker: 12 CPU, 7,7 GiB RAM; `python3` 3.11.9 и системный `/usr/bin/python3` 3.9.6, uv 0.12.17 |
|
||||
| Хост | Docker Desktop 29.8.2, Compose v5.5.1, macOS arm64 (Apple M3 Pro); ВМ Docker: 12 CPU, 7,7 GiB RAM; `python3` 3.11.9 и системный `/usr/bin/python3` 3.9.6, uv 0.12.17. От батареи, работал посторонний контейнер `domains-postgres-1` (проверка, а не замер) |
|
||||
|
||||
Пароли из сгенерированного `.env` не выводились: проверялось только,
|
||||
что они есть (32 hex-символа).
|
||||
@@ -16,7 +16,7 @@
|
||||
```text
|
||||
$ git clone --branch solution/bvt2301-safronov <репозиторий> clean-clone && cd clean-clone
|
||||
$ git log --oneline -1; git status --short | wc -l; ls .env config.toml .venv
|
||||
dbb9150 docs: note local-only label logs in the report
|
||||
8fa12f5 docs: close the known issues fixed by fix-known-issues
|
||||
0
|
||||
ls: .env: No such file or directory
|
||||
ls: .venv: No such file or directory
|
||||
@@ -27,24 +27,16 @@ env ready: .env, config.toml
|
||||
$ grep -c -E '^(POSTGRES|VALKEY)_PASSWORD=.{32}$' .env
|
||||
2
|
||||
|
||||
$ make run_docker # exit 0, 6 с (слои — из кэша BuildKit)
|
||||
#3 [internal] load metadata for docker.io/library/python:3.12.14-slim-trixie@sha256:f77ac9e4…
|
||||
#4 [internal] load metadata for ghcr.io/astral-sh/uv:0.12.17@sha256:10787c68…
|
||||
Image mtusi-messenger:lab3 Built
|
||||
Container mtusi-lab3-postgres-1 Created
|
||||
Container mtusi-lab3-valkey-1 Created
|
||||
Container mtusi-lab3-migrate-1 Created
|
||||
Container mtusi-lab3-api-1 Creating
|
||||
Container mtusi-lab3-api-2 Creating
|
||||
$ make run_docker # exit 0, 7 с (слои — из кэша BuildKit)
|
||||
|
||||
$ docker compose ps -a --format 'table {{.Name}}\t{{.Status}}\t{{.Ports}}'
|
||||
NAME STATUS PORTS
|
||||
mtusi-lab3-api-1 Up Less than a second (health: starting) 8080/tcp
|
||||
mtusi-lab3-api-2 Up Less than a second (health: starting) 8080/tcp
|
||||
mtusi-lab3-haproxy-1 Up Less than a second (health: starting) 127.0.0.1:8080->8080/tcp
|
||||
mtusi-lab3-migrate-1 Exited (0) Less than a second ago
|
||||
mtusi-lab3-postgres-1 Up 3 seconds (healthy) 127.0.0.1:5433->5432/tcp
|
||||
mtusi-lab3-valkey-1 Up 3 seconds (healthy) 127.0.0.1:6380->6379/tcp
|
||||
$ docker compose ps -a --format 'table {{.Name}}\t{{.Status}}\t{{.Ports}}' # через 20 с
|
||||
NAME STATUS PORTS
|
||||
mtusi-lab3-api-1 Up 20 seconds (healthy) 8080/tcp
|
||||
mtusi-lab3-api-2 Up 20 seconds (healthy) 8080/tcp
|
||||
mtusi-lab3-haproxy-1 Up 20 seconds (healthy) 127.0.0.1:8080->8080/tcp
|
||||
mtusi-lab3-migrate-1 Exited (0) 20 seconds ago
|
||||
mtusi-lab3-postgres-1 Up 25 seconds (healthy) 127.0.0.1:5433->5432/tcp
|
||||
mtusi-lab3-valkey-1 Up 24 seconds (healthy) 127.0.0.1:6380->6379/tcp
|
||||
|
||||
$ docker compose logs migrate --no-log-prefix | tail -5 # поле event
|
||||
Running upgrade -> 16c279725564, added messenger tables
|
||||
@@ -55,13 +47,12 @@ Finished alembic
|
||||
```
|
||||
|
||||
`8080/tcp` у реплик — `EXPOSE` образа: опубликованного порта у них
|
||||
нет, API на хосте — только через HAProxy. Через ~20 с после
|
||||
`make run_docker` все пять контейнеров — `healthy`.
|
||||
нет, API на хосте — только через HAProxy.
|
||||
|
||||
Сборка без кэша слоёв из того же клона (отдельный тег, затем удалён):
|
||||
|
||||
```text
|
||||
$ docker build --no-cache --pull -t mtusi-clean-check:nocache . # exit 0, 14 с
|
||||
$ docker build --no-cache --pull -t mtusi-clean-check:nocache . # exit 0, 77 с
|
||||
$ docker run --rm --entrypoint sh mtusi-clean-check:nocache -c 'id -u; ls /app; …'
|
||||
10001
|
||||
alembic.ini
|
||||
@@ -71,9 +62,6 @@ no-.env
|
||||
no-config.toml
|
||||
```
|
||||
|
||||
Колёса зависимостей `uv sync --locked` берёт из cache mount BuildKit,
|
||||
поэтому 14 с; на машине без кэша добавится их загрузка.
|
||||
|
||||
## Контракт, smoke и распределение
|
||||
|
||||
```text
|
||||
@@ -85,14 +73,14 @@ PASS: full OpenAPI 3.1 and JSON Schema validation; application NOT tested.
|
||||
$ make test # exit 0
|
||||
PASS: lab3 public API scenario; infrastructure and grading evidence remain separate.
|
||||
$ make instances # python3 3.11.9
|
||||
user lb_6d1a00ab: one login, 12 requests with one token
|
||||
417ccb2d21f7: 6
|
||||
d65d5a9a1f9d: 6
|
||||
user lb_d2986d44: one login, 12 requests with one token
|
||||
bbddd2338014: 6
|
||||
4c914e2e525f: 6
|
||||
instances: 2
|
||||
$ make instances PYTHON=/usr/bin/python3 # системный python3 3.9.6 macOS
|
||||
user lb_938940d5: one login, 12 requests with one token
|
||||
417ccb2d21f7: 6
|
||||
d65d5a9a1f9d: 6
|
||||
user lb_ef79f8fe: one login, 12 requests with one token
|
||||
bbddd2338014: 6
|
||||
4c914e2e525f: 6
|
||||
instances: 2
|
||||
```
|
||||
|
||||
@@ -100,24 +88,24 @@ instances: 2
|
||||
|
||||
```text
|
||||
$ docker inspect … (до) имя, ID, состояние, StartedAt
|
||||
/mtusi-lab3-api-1 d65d5a9a1f9d running 2026-10-13T11:53:54Z
|
||||
/mtusi-lab3-api-2 417ccb2d21f7 running 2026-10-13T11:53:54Z
|
||||
/mtusi-lab3-haproxy-1 d9364d5ace67 running 2026-10-13T11:53:54Z
|
||||
/mtusi-lab3-postgres-1 f43ceff42127 running 2026-10-13T11:53:50Z
|
||||
/mtusi-lab3-valkey-1 78746395893f running 2026-10-13T11:53:50Z
|
||||
/mtusi-lab3-api-1 bbddd2338014 running 2026-10-13T14:54:53Z
|
||||
/mtusi-lab3-api-2 4c914e2e525f running 2026-10-13T14:54:53Z
|
||||
/mtusi-lab3-haproxy-1 2627286e6f84 running 2026-10-13T14:54:53Z
|
||||
/mtusi-lab3-postgres-1 25b076681377 running 2026-10-13T14:54:48Z
|
||||
/mtusi-lab3-valkey-1 ab2c07c37f5c running 2026-10-13T14:54:48Z
|
||||
|
||||
$ make test-persistence ACTION_SCRIPT=scripts/restart.sh # exit 0
|
||||
Executing explicit persistence hook; hook output suppressed to avoid leaking secrets.
|
||||
PASS: persistence preserved confirmed data and existing session. Hook scope needs operator evidence.
|
||||
|
||||
$ docker inspect … (после)
|
||||
/mtusi-lab3-api-1 d65d5a9a1f9d running 2026-10-13T11:54:32Z
|
||||
/mtusi-lab3-api-2 417ccb2d21f7 running 2026-10-13T11:54:33Z
|
||||
/mtusi-lab3-haproxy-1 d9364d5ace67 running 2026-10-13T11:54:33Z
|
||||
/mtusi-lab3-postgres-1 f43ceff42127 running 2026-10-13T11:54:29Z
|
||||
/mtusi-lab3-valkey-1 78746395893f running 2026-10-13T11:54:29Z
|
||||
/mtusi-lab3-api-1 bbddd2338014 running 2026-10-13T14:56:53Z
|
||||
/mtusi-lab3-api-2 4c914e2e525f running 2026-10-13T14:56:53Z
|
||||
/mtusi-lab3-haproxy-1 2627286e6f84 running 2026-10-13T14:56:53Z
|
||||
/mtusi-lab3-postgres-1 25b076681377 running 2026-10-13T14:56:49Z
|
||||
/mtusi-lab3-valkey-1 ab2c07c37f5c running 2026-10-13T14:56:49Z
|
||||
$ docker volume inspect -f '{{.Name}} {{.CreatedAt}}' mtusi-lab3_postgres_data
|
||||
mtusi-lab3_postgres_data 2026-10-13T11:53:50Z
|
||||
mtusi-lab3_postgres_data 2026-10-13T14:54:47Z
|
||||
```
|
||||
|
||||
Перезапущены LB, обе реплики, Postgres и Valkey: те же ID, новый
|
||||
@@ -130,109 +118,83 @@ mtusi-lab3_postgres_data 2026-10-13T11:53:50Z
|
||||
|
||||
```text
|
||||
$ STOP_ONE_LOG=<файл> make test-failover ACTION_SCRIPT=scripts/stop-one.sh # exit 0
|
||||
{"observed_instances_before": 2, "successful_writes": 117, "failed_attempts": 0, "first_recovery_seconds": 0.965}
|
||||
{"observed_instances_before": 2, "successful_writes": 121, "failed_attempts": 0, "first_recovery_seconds": 1.207}
|
||||
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
|
||||
2026-10-13T11:54:43Z TARGET_INSTANCE_ID=d65d5a9a1f9d container=d65d5a9a1f9dfa3e… mode=stop
|
||||
2026-10-13T14:56:56Z TARGET_INSTANCE_ID=bbddd2338014 container=bbddd2338014a8ff… mode=stop
|
||||
$ docker compose ps -a --format '{{.Name}} {{.ID}} {{.Status}}' api
|
||||
mtusi-lab3-api-1 d65d5a9a1f9d Exited (0) 14 seconds ago
|
||||
mtusi-lab3-api-2 417ccb2d21f7 Up 25 seconds (healthy)
|
||||
mtusi-lab3-api-1 bbddd2338014 Exited (0) 14 seconds ago
|
||||
mtusi-lab3-api-2 4c914e2e525f Up 17 seconds (healthy)
|
||||
|
||||
$ make replicas # exit 0, тот же контейнер api-1 снова healthy
|
||||
$ curl -s -o /dev/null -D - http://127.0.0.1:8080/health/live | grep -i x-instance-id
|
||||
x-instance-id: 417ccb2d21f7 # сдвиг очереди round-robin одним запросом
|
||||
x-instance-id: 4c914e2e525f # сдвиг очереди round-robin одним запросом
|
||||
|
||||
$ STOP_ONE_LOG=<файл> make test-failover ACTION_SCRIPT=scripts/stop-one.sh # exit 0
|
||||
{"observed_instances_before": 2, "successful_writes": 120, "failed_attempts": 0, "first_recovery_seconds": 1.092}
|
||||
{"observed_instances_before": 2, "successful_writes": 122, "failed_attempts": 0, "first_recovery_seconds": 0.961}
|
||||
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
|
||||
2026-10-13T11:55:01Z TARGET_INSTANCE_ID=417ccb2d21f7 container=417ccb2d21f75c51… mode=stop
|
||||
mtusi-lab3-api-1 d65d5a9a1f9d Up 17 seconds (healthy)
|
||||
mtusi-lab3-api-2 417ccb2d21f7 Exited (0) 14 seconds ago
|
||||
2026-10-13T14:57:14Z TARGET_INSTANCE_ID=4c914e2e525f container=4c914e2e525f002f… mode=stop
|
||||
mtusi-lab3-api-1 bbddd2338014 Up 17 seconds (healthy)
|
||||
mtusi-lab3-api-2 4c914e2e525f Exited (0) 14 seconds ago
|
||||
|
||||
$ make replicas # exit 0
|
||||
$ STOP_MODE=kill STOP_ONE_LOG=<файл> make test-failover ACTION_SCRIPT=scripts/stop-one.sh # exit 0
|
||||
{"observed_instances_before": 2, "successful_writes": 121, "failed_attempts": 0, "first_recovery_seconds": 0.221}
|
||||
{"observed_instances_before": 2, "successful_writes": 122, "failed_attempts": 1, "first_recovery_seconds": 0.229}
|
||||
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
|
||||
2026-10-13T11:55:18Z TARGET_INSTANCE_ID=417ccb2d21f7 container=417ccb2d21f75c51… mode=kill
|
||||
mtusi-lab3-api-1 d65d5a9a1f9d Up 35 seconds (healthy)
|
||||
mtusi-lab3-api-2 417ccb2d21f7 Exited (137) 15 seconds ago
|
||||
2026-10-13T14:57:31Z TARGET_INSTANCE_ID=bbddd2338014 container=bbddd2338014a8ff… mode=kill
|
||||
mtusi-lab3-api-1 bbddd2338014 Exited (137) 15 seconds ago
|
||||
mtusi-lab3-api-2 4c914e2e525f Up 17 seconds (healthy)
|
||||
|
||||
$ make replicas; make lb_stats # exit 0
|
||||
$ make replicas; make lb_stats # exit 0 (через 2 с после make replicas)
|
||||
svname addr status check_status scur stot econ wretr wredis hrsp_5xx
|
||||
api-1 172.30.0.5:8080 UP L7OK 0 200 0 0 3 0
|
||||
api-2 172.30.0.4:8080 UP L7OK 0 324 0 0 3 0
|
||||
BACKEND - UP - 0 520 2 0 6 2
|
||||
api-1 172.30.0.5:8080 UP L7OK 0 211 0 0 4 0
|
||||
api-2 172.30.0.4:8080 UP L7OK 0 322 0 0 2 0
|
||||
BACKEND - UP - 0 529 2 0 6 3
|
||||
free slots: 6
|
||||
```
|
||||
|
||||
Остановлены по очереди обе реплики: ID остановленного контейнера
|
||||
совпадает с `TARGET_INSTANCE_ID`, остальные работают; первая запись
|
||||
после остановки — через 0,97 и 1,09 с (`stop`) и 0,22 с (`kill`),
|
||||
неудачных попыток 0. У слотов реплик 5xx нет; два `hrsp_5xx` у
|
||||
`BACKEND` — ответы самого LB, как в прошлой проверке: счётчики обнулил
|
||||
рестарт LB в `restart.sh`, после него тест сохранности ждёт готовности
|
||||
опросом, а до проверок реплик LB отвечает 503
|
||||
(`evidence/replicas/test-persistence.md`). Клиенту тестов отказа ни
|
||||
одна ошибка не досталась (`failed_attempts` 0).
|
||||
после остановки — через 1,21 и 0,96 с (`stop`) и 0,23 с (`kill`). У
|
||||
`stop` неудачных попыток 0. У `kill` одна: запрос был в полёте на
|
||||
убитой реплике, LB его не повторяет (`POST` не идемпотентен для LB),
|
||||
тест повторил его с тем же ключом — без дубля, как в замере
|
||||
`graceful-failover`. Сразу после `make replicas` слот вернувшейся
|
||||
реплики — `DOWN 1/2`, через 2 с — `UP`: LB включает её после `rise 2`
|
||||
проверок. `hrsp_5xx` у `BACKEND` — ответы самого LB во время рестарта
|
||||
в `restart.sh` (до проверок реплик LB отвечает 503,
|
||||
`evidence/replicas/test-persistence.md`).
|
||||
|
||||
## Собственные тесты
|
||||
|
||||
```text
|
||||
$ make student_test # exit 0, 23 с
|
||||
$ make student_test # exit 0, 22 с
|
||||
coverage: 137 scenarios in 11 specs, 125 tested (18 by make failure_checks), 12 excluded
|
||||
one session, 20 requests: {'417ccb2d21f7': 10, 'd65d5a9a1f9d': 10}
|
||||
key race through replicas: {'d65d5a9a1f9d': 5, '417ccb2d21f7': 5}
|
||||
===================== 131 passed, 17 deselected in 22.73s ======================
|
||||
one session, 20 requests: {'bbddd2338014': 10, '4c914e2e525f': 10}
|
||||
key race through replicas: {'4c914e2e525f': 5, 'bbddd2338014': 5}
|
||||
===================== 133 passed, 17 deselected in 21.68s ======================
|
||||
|
||||
$ make failure_checks # exit 0, 1 132 с (см. ниже)
|
||||
[failure_checks] project=mtusi-lab3-failures (working stand: mtusi-lab3)
|
||||
test_expired_token PASSED test_readiness_without_database PASSED
|
||||
test_use_does_not_extend_session PASSED test_readiness_without_cache PASSED
|
||||
test_token_while_database_stopped PASSED test_flush_cache PASSED
|
||||
test_members_failure_rolls_back_chat PASSED test_valkey_stopped PASSED
|
||||
test_database_stopped_and_back PASSED test_valkey_paused PASSED
|
||||
test_pool_exhausted PASSED test_valkey_back PASSED
|
||||
test_connection_limit_reached PASSED test_message_failure_keeps_key_free PASSED
|
||||
test_pool_keeps_connections PASSED test_database_outage_keeps_key_free PASSED
|
||||
test_key_free_after_ttl PASSED
|
||||
================ 17 passed, 131 deselected in 61.41s (0:01:01) =================
|
||||
Volume mtusi-lab3-failures_postgres_data Removed
|
||||
Network mtusi-lab3-failures_default Removed
|
||||
[failure_checks] results: {'fault': 0}
|
||||
$ make failure_checks # exit 0, 70 с
|
||||
================ 17 passed, 133 deselected in 60.47s (0:01:00) =================
|
||||
[failure_checks] postgres log: 380 lines, crash markers 0; "too many clients" 25, "administrator command" 129
|
||||
[failure_checks] results: {'fault': 0, 'postgres': 0}
|
||||
|
||||
$ make failure_checks # повтор с отметкой времени на строку, exit 0, 70 с
|
||||
12:16:24 [failure_checks] project=mtusi-lab3-failures (working stand: mtusi-lab3)
|
||||
12:16:25 [failure_checks] build image
|
||||
12:16:25 [failure_checks] start postgres and valkey
|
||||
12:16:27 [failure_checks] migrations
|
||||
12:16:30 [failure_checks] start api containers
|
||||
12:16:32 [failure_checks] ready: api=http://127.0.0.1:60212 tight=http://127.0.0.1:60216
|
||||
12:16:32 [failure_checks] pytest -m fault
|
||||
12:17:34 ================ 17 passed, 131 deselected in 61.10s (0:01:01) =================
|
||||
12:17:34 [failure_checks] cleanup
|
||||
12:17:34 [failure_checks] results: {'fault': 0}
|
||||
|
||||
$ make test_isolated # exit 0, 63 с
|
||||
$ make test_isolated # exit 0, 61 с
|
||||
PASS: lab3 public API scenario; infrastructure and grading evidence remain separate.
|
||||
SKIPPED [1] student-tests/test_idempotency.py:282: one API process (EXPECT_REPLICAS=1): replica checks need the stand with the load balancer
|
||||
… (ещё 3 теста реплик с той же причиной)
|
||||
================ 127 passed, 4 skipped, 17 deselected in 55.61s ================
|
||||
[test_isolated] cleanup
|
||||
================ 129 passed, 4 skipped, 17 deselected in 53.09s ================
|
||||
[test_isolated] results: {'test': 0, 'student_test': 0}
|
||||
```
|
||||
|
||||
Первый `make failure_checks` шёл 1 132 с, хотя pytest — 61 с:
|
||||
миграции стенда отказов закончились в 11:56:10, а следующая команда
|
||||
началась около 12:13. Отметок времени у строк в том прогоне не было,
|
||||
и шаг, на котором ушли ~16 мин (запуск двух контейнеров API или
|
||||
уборка), не установлен; события Docker за это окно уже вытеснены из
|
||||
буфера демона. Повтор с отметкой на каждую строку — 70 с, все шаги
|
||||
укладываются в секунды (выше). Тесты в обоих прогонах — 17 passed,
|
||||
стенд отказов удалён, рабочий не тронут; вывод — разовая задержка
|
||||
Docker Desktop на хосте, не дефект проверки.
|
||||
133 и 129 вместо прошлых 131 и 127 — два новых теста сверки ссылок
|
||||
исключений на файлы evidence (они в клоне есть, сверка зелёная).
|
||||
`make failure_checks` теперь печатает сводку журнала PostgreSQL стенда
|
||||
отказов: признаков аварийного перезапуска нет. 4 пропуска в изоляции —
|
||||
тесты реплик с причиной «one API process».
|
||||
|
||||
## Уборка и рабочий стенд
|
||||
|
||||
```text
|
||||
$ git status --short | wc -l # в каталоге клона после всех команд
|
||||
0
|
||||
$ docker compose down -v # в каталоге клона, проект mtusi-lab3
|
||||
Volume mtusi-lab3_postgres_data Removed
|
||||
Network mtusi-lab3_default Removed
|
||||
@@ -241,11 +203,11 @@ $ docker ps -a --filter name=failures -q | wc -l; docker ps -a --filter name=tes
|
||||
0
|
||||
$ make run_docker # в каталоге рабочего репозитория, exit 0
|
||||
$ docker compose ps --format '{{.Name}} {{.Status}}'
|
||||
mtusi-lab3-api-1 Up 15 seconds (healthy)
|
||||
mtusi-lab3-api-2 Up 15 seconds (healthy)
|
||||
mtusi-lab3-haproxy-1 Up 15 seconds (healthy)
|
||||
mtusi-lab3-postgres-1 Up 18 seconds (healthy)
|
||||
mtusi-lab3-valkey-1 Up 18 seconds (healthy)
|
||||
mtusi-lab3-api-1 Up 18 seconds (healthy)
|
||||
mtusi-lab3-api-2 Up 18 seconds (healthy)
|
||||
mtusi-lab3-haproxy-1 Up 18 seconds (healthy)
|
||||
mtusi-lab3-postgres-1 Up 22 seconds (healthy)
|
||||
mtusi-lab3-valkey-1 Up 22 seconds (healthy)
|
||||
$ make lb_stats
|
||||
api-1 172.30.0.5:8080 UP L7OK …
|
||||
api-2 172.30.0.4:8080 UP L7OK …
|
||||
|
||||
@@ -547,7 +547,7 @@
|
||||
|
||||
## 9. Итоговая проверка из чистого clone
|
||||
|
||||
- [ ] 9.1 По разделу `REPORT.md` «Запуск из чистого clone» и образцу
|
||||
- [x] 9.1 По разделу `REPORT.md` «Запуск из чистого clone» и образцу
|
||||
`evidence/tests/clean-clone-final.md`, на commit 12:
|
||||
- рабочий стенд — `docker compose down -v`;
|
||||
- `git clone --branch solution/bvt2301-safronov <репозиторий>
|
||||
@@ -566,14 +566,14 @@
|
||||
|
||||
Все команды — код 0 без правки файлов клона. Сбой — разбор: дефект
|
||||
кода или инструкции правится commit и проверка повторяется.
|
||||
- [ ] 9.2 `evidence/tests/clean-clone-final.md` — переписать на commit
|
||||
- [x] 9.2 `evidence/tests/clean-clone-final.md` — переписать на commit
|
||||
12: дата, результаты, «Прошлая такая проверка (commit `dbb9150`) — в
|
||||
истории этого файла». Пароли не выводить.
|
||||
- [ ] 9.3 `REPORT.md`, свежий Read:
|
||||
- [x] 9.3 `REPORT.md`, свежий Read:
|
||||
- шапка: проверенный из чистого clone commit и дата, что менялось
|
||||
после него — только документы;
|
||||
- строка таблицы доказательств «Итоговая проверка из чистого clone».
|
||||
- [ ] 9.4 Финал:
|
||||
- [x] 9.4 Финал:
|
||||
- отметки 9.x в `tasks.md`;
|
||||
- `openspec validate fix-known-issues --strict`;
|
||||
- commit 13, дерево чистое;
|
||||
|
||||
Reference in New Issue
Block a user