Перенесено дерево lab5 целиком: NestJS-приложение (API + worker,
RabbitMQ, outbox, S3), Dockerfile, compose.yaml, infra/{haproxy,minio,
rabbitmq}, стендовые скрипты, scripts/lab4, scripts/lab5,
evidence/lab4, evidence/lab5 и contracts/extensions.openapi.json.
Задание lab6 оставлено своим: README, REPORT, COURSE, lab.json,
contracts/{openapi,infrastructure,jobs.schema,attachment-states,
examples,observability}, tests, compose.example.yaml, infra/otel,
.github/pull_request_template.md.
Адаптации при переносе:
- docker-проект mtusi-lab5 -> mtusi-lab6 и тег образа
mtusi-messenger:lab6 (compose.yaml, scripts/stop-one.sh, .env.example,
infra/README.md), чтобы тома и контейнеры не пересекались с lab5;
- Makefile: цели lab5 сохранены целиком (skeleton lab6 не отличается
от skeleton lab5);
- .env.example: переменные приложения и стенда lab5 + блок lab6
(OTEL_*) из skeleton.
4.4 KiB
lab5 — сводка доказательств
Дата прогона: 2026-11-05. Хост: 8 vCPU i7-11370H, 15 GiB RAM; Docker 29.9.2, Node 25.7.0, Python 3.14.8. Все команды выполнены из корня репозитория; секреты и токены не печатались.
| Критерий | Файл | Наблюдение |
|---|---|---|
| Offline-структура и OpenAPI | make-check.txt |
PASS: offline skeleton structure |
| Публичный smoke (уровень 3) | make-test.txt |
PASS: lab5 public API scenario; 202 → ready → thumbnail 256×160 JPEG |
| Юнит-тесты | unit-tests.txt |
18 файлов, 70 тестов, все зелёные; включены fit-inside, backoff, job-message, classifyError, pipelines (EXIF, alpha, determinism) |
| E2E приложения | make-test-e2e.txt |
44 passed, 9 skipped (opt-in dependency сценарии) |
| Отказы зависимостей | make-test-dependencies.txt |
7/7: Redis, PostgreSQL, per-replica DB path, насыщение пула, S3 stop/pause, staging при PG down |
| Сохранность после рестарта stores | persistence.txt |
PASS: persistence preserved confirmed data and existing session |
| Failover API-реплики | failover.txt |
130 успешных записей, 0 ошибок, первое восстановление 3.568 s, 2 инстанса до отказа |
| Демонстрация «worker остановлен» | worker-down-demo.txt |
202 queued, content 409, сообщение привязано, очередь пережила restart broker+API, после start worker — ready и thumbnail 256×160 |
| Уровень 4, fault injection | faults-level4.json, faults-level4.txt |
7/7 сценариев, все I1–I6; crash COMMIT→publish, retry/replay, timeout, DLQ, big image |
| Трек 2, 3 повтора | track2.json, track2.txt |
21/21 (7 сценариев × 3), все I1–I6; duplicate, reorder, crash до/после side effect, crash после COMMIT до ack, relay crash, stale version |
| Память worker на 40 Мп | big-image-memory.txt |
2 × 8000×5000 одновременно; пик 992.2 MiB в финальном прогоне (934–966 MiB в предыдущих) при лимите 1280 MiB; OOMKilled=false |
| Восстановление потерянного сообщения | reconciler.txt |
сообщение удалено из очереди после publish; reconciler переотправил, attachment ready за 5.1 s, событие reconciled |
| Resubscribe после рестарта broker | broker-resubscribe.txt |
после restart broker consumer вернулся, следующий upload дошёл до ready с 3 вариантами |
| Разделение RabbitMQ identities | broker-identities.txt |
messenger и messenger-worker; API читает только обменники, worker — очередь; оба ограничены четырьмя ресурсами топологии |
| Состав стенда | compose-ps.txt |
api ×2 healthy, worker healthy, broker healthy, postgres/redis/s3 healthy |
| Очереди и job после demo | queues.txt |
process 0/1 consumer, DLQ 12 (накопленные poison-сообщения); job succeeded attempt 1, staging_present=false |
Параметры fault-стенда
FAULT_INJECTION_ENABLED=1 JOB_TIMEOUT_SECONDS=10 JOB_LEASE_SECONDS=8 \
JOB_RETRY_BASE_MS=500 JOB_RETRY_MAX_MS=4000 make stand-up
WORKER_CONCURRENCY=2, JOB_MAX_ATTEMPTS=5, WORKER_MEMORY=1280m.
После экспериментов стенд возвращён в штатный режим
(FAULT_INJECTION_ENABLED=0, timeout 60 s, lease 30 s) и make test повторён.
Итог трека 2
track2.json: 21 запуск, 21 passed. Средние длительности: duplicate 16.7 s,
reorder 36.7 s, crash_before 42.1 s, crash_after 43.9 s, crash_after_ack
33.2 s, relay_crash 42.1 s, stale_version 48.8 s. Ни один инвариант I1–I6 не
нарушен. Повторные публикации и redelivery наблюдались и поглощались
(duplicate_skipped), S3 etag вариантов не менялся; v1 после v2 получил
superseded, а v2-объекты остались нетронутыми.