ЛР 5 — БВТ2301 — Чурилин — на 5 #42

Closed
d1frend wants to merge 1 commits from d1frend/mtusi2026lab5:solution/bvt2301-churilin into main
First-time contributor

Лабораторная 5

Автор / группа: Чурилин Данила, БВТ2301
Целевая оценка (3/4/5): 5
Трек 5, если заявлен: трек 2 — доказанная идемпотентность versioned pipeline

Что реализовано и что перенесено:

  • Сохранены возможности предыдущих лабораторных: авторизация, чаты, сообщения, идемпотентность запросов, PostgreSQL, Redis, MinIO, две API-реплики, HAProxy и reconciler.
  • Реализован асинхронный pipeline API → durable MinIO staging → PostgreSQL job/outbox → RabbitMQ → worker.
  • Upload возвращает 202 только после устойчивой записи staging и job.
  • Реализованы состояния queued/processing/ready/failed, bounded retry, backoff с jitter, lease recovery и failed registry.
  • Добавлены thumbnail JPEG, crop JPEG 128×128 и optimized WebP.
  • Реализованы transactional outbox, publisher confirms и manual consumer ACK.
  • Добавлены безопасный replay, staging cleanup и operator jobctl.
  • Реализованы versioned pipeline v1/v2, superseded jobs и upgrade pipeline.
  • Добавлен автоматический fault injection для crash до/после side effect, duplicate, reorder и stale job после новой версии.
  • Идемпотентность обеспечивается ключом (attachment_id, pipeline_version, variant) и проверкой активной версии при всех переходах.
  • Reconciler адаптирован к lab5: активные queued/processing не удаляются, inventory учитывает original, staging и все versioned variants.

Команды запуска из чистого clone:

cp .env.example .env
make init-secrets

docker compose --env-file .env config --quiet
docker compose --env-file .env up -d --build
docker compose --env-file .env up -d --wait

make check
make test BASE_URL=http://127.0.0.1:8080
make test-async-resilience BASE_URL=http://127.0.0.1:8080
make test-level4-resilience BASE_URL=http://127.0.0.1:8080
make test-level5-idempotency BASE_URL=http://127.0.0.1:8080

Результаты проверок и ссылка на REPORT.md:

  • make check — PASS
  • make validate — PASS
  • make test — PASS
  • make test-async-resilience — PASS
  • make test-level4-resilience — PASS
  • make test-level5-idempotency — PASS
  • go test -count=1 ./... — PASS
  • go test -race -count=1 ./... — PASS
  • go vet ./... — PASS
  • go build ./... — PASS
  • Frontend Vitest/TypeScript/Vite build — PASS
  • Persistence — PASS
  • API failover — 142 успешные записи, 0 ошибок
  • Reconciler integration/scale — PASS
  • Чистые миграции 1→6 — PASS
  • RabbitMQ после сценариев: ready=0, unacknowledged=0
    Полный отчёт: REPORT.md
    Доказательства уровня 4: lab5-grade4.md
    Доказательства уровня 5: lab5-grade5.md

Ограничения / известные ошибки:

  • Поддержаны pipeline v1 и v2, произвольный registry версий не реализован.
  • Upgrade выполняется операторской командой, а не публичным API.
  • Исторические versioned variants сохраняются для аудита.
  • Lease фиксированный; heartbeat-продление отсутствует.
  • Failed registry хранится в PostgreSQL, а не в отдельной broker DLQ.
  • Доказан идемпотентный effectively-once результат, но не exactly-once delivery.
  • Эксперимент выполнен на одном Docker-host и не моделирует потерю host/volumes.
    Источники и использование ИИ:

Go standard library, amqp091-go, disintegration/imaging, go-webp, PostgreSQL/pgx, MinIO SDK и RabbitMQ. OpenAI Codex использован для проектирования, реализации, fault injection, тестирования, аудита и подготовки отчёта.

  • Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
  • Контракт и публичные тесты не ослаблены.
  • make check и make test выполнены; приложен реальный вывод.
  • Сценарии отказов/безопасности своего уровня воспроизведены.
  • Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
  • README задания сохранён, REPORT.md содержит инструкцию именно моего решения
## Лабораторная 5 Автор / группа: Чурилин Данила, БВТ2301 Целевая оценка (3/4/5): 5 Трек 5, если заявлен: трек 2 — доказанная идемпотентность versioned pipeline Что реализовано и что перенесено: - Сохранены возможности предыдущих лабораторных: авторизация, чаты, сообщения, идемпотентность запросов, PostgreSQL, Redis, MinIO, две API-реплики, HAProxy и reconciler. - Реализован асинхронный pipeline API → durable MinIO staging → PostgreSQL job/outbox → RabbitMQ → worker. - Upload возвращает 202 только после устойчивой записи staging и job. - Реализованы состояния queued/processing/ready/failed, bounded retry, backoff с jitter, lease recovery и failed registry. - Добавлены thumbnail JPEG, crop JPEG 128×128 и optimized WebP. - Реализованы transactional outbox, publisher confirms и manual consumer ACK. - Добавлены безопасный replay, staging cleanup и operator jobctl. - Реализованы versioned pipeline v1/v2, superseded jobs и upgrade pipeline. - Добавлен автоматический fault injection для crash до/после side effect, duplicate, reorder и stale job после новой версии. - Идемпотентность обеспечивается ключом `(attachment_id, pipeline_version, variant)` и проверкой активной версии при всех переходах. - Reconciler адаптирован к lab5: активные queued/processing не удаляются, inventory учитывает original, staging и все versioned variants. Команды запуска из чистого clone: ```sh cp .env.example .env make init-secrets docker compose --env-file .env config --quiet docker compose --env-file .env up -d --build docker compose --env-file .env up -d --wait make check make test BASE_URL=http://127.0.0.1:8080 make test-async-resilience BASE_URL=http://127.0.0.1:8080 make test-level4-resilience BASE_URL=http://127.0.0.1:8080 make test-level5-idempotency BASE_URL=http://127.0.0.1:8080 ``` Результаты проверок и ссылка на REPORT.md: - make check — PASS - make validate — PASS - make test — PASS - make test-async-resilience — PASS - make test-level4-resilience — PASS - make test-level5-idempotency — PASS - go test -count=1 ./... — PASS - go test -race -count=1 ./... — PASS - go vet ./... — PASS - go build ./... — PASS - Frontend Vitest/TypeScript/Vite build — PASS - Persistence — PASS - API failover — 142 успешные записи, 0 ошибок - Reconciler integration/scale — PASS - Чистые миграции 1→6 — PASS - RabbitMQ после сценариев: ready=0, unacknowledged=0 Полный отчёт: [REPORT.md](REPORT.md) Доказательства уровня 4: [lab5-grade4.md](evidence/lab5-grade4.md) Доказательства уровня 5: [lab5-grade5.md](evidence/lab5-grade5.md) Ограничения / известные ошибки: - Поддержаны pipeline v1 и v2, произвольный registry версий не реализован. - Upgrade выполняется операторской командой, а не публичным API. - Исторические versioned variants сохраняются для аудита. - Lease фиксированный; heartbeat-продление отсутствует. - Failed registry хранится в PostgreSQL, а не в отдельной broker DLQ. - Доказан идемпотентный effectively-once результат, но не exactly-once delivery. - Эксперимент выполнен на одном Docker-host и не моделирует потерю host/volumes. Источники и использование ИИ: Go standard library, amqp091-go, disintegration/imaging, go-webp, PostgreSQL/pgx, MinIO SDK и RabbitMQ. OpenAI Codex использован для проектирования, реализации, fault injection, тестирования, аудита и подготовки отчёта. - [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами. - [x] Контракт и публичные тесты не ослаблены. - [x] make check и make test выполнены; приложен реальный вывод. - [x] Сценарии отказов/безопасности своего уровня воспроизведены. - [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens. - [x] README задания сохранён, REPORT.md содержит инструкцию именно моего решения
d1frend added 1 commit 2026-11-10 16:25:02 +03:00
Owner

Принято. Закрываю МР.

Принято. Закрываю МР.
veprickiy closed this pull request 2026-11-17 11:03:31 +03:00

Pull request closed

Please reopen this pull request to perform a merge.
Sign in to join this conversation.
No Reviewers
No labels
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab5#42