ЛР 3 — БВТ2303 — Вейнмайер — на 5 #43

Closed
Weinmaier_Andrew wants to merge 8 commits from Weinmaier_Andrew/mtusi2026lab3:solution/bvt2303-weinmaier into main
First-time contributor

Лабораторная 3

Автор / группа: Вейнмайер Андрей Андреевич, БВТ2303
Целевая оценка (3/4/5): 5
Трек 5, если заявлен: трек 1 «Цена масштабирования»

Что реализовано и что перенесено. Из lab2 перенесены Go-API, PostgreSQL-схема, сессии и кэш в Redis. Добавлено: X-Instance-Id в каждом ответе; обязательный Idempotency-Key (ключ и сообщение в одной транзакции PostgreSQL, конкурентные повторы через разные реплики дают одно сообщение, другой body — 409); HAProxy с active readiness-check и DNS Docker; 2+ взаимозаменяемых реплики без container_name и без внешних портов; однократные миграции отдельным сервисом; drain по SIGTERM (readiness 503 → LB исключает реплику → Shutdown); скрипты stop-one / restore / restart / rolling-update; собственные тесты в student-tests/.

Команды запуска из чистого clone:

sh scripts/init-secrets.sh
docker compose --env-file .env up -d --build --wait
make test
make test-failover ACTION_SCRIPT=scripts/stop-one.sh && sh scripts/restore.sh
make test-persistence ACTION_SCRIPT=scripts/restart.sh
sh scripts/collect-evidence.sh   # все доказательства уровней 3–4
make track1                      # эксперименты трека 1

Результаты проверок — подробно в REPORT.md, сырые данные в evidence/:

  • smoke, failover ×2, persistence с прежним токеном — PASS; при остановке реплики 0 ошибок, первая запись через 3.4 s;
  • конкурентная идемпотентность: 10 раундов × 16 параллельных запросов, 0 дублей, 2 реплики;
  • уровень 4: поочерёдная остановка каждой реплики под нагрузкой — 0 ошибок, 0 потерь, возврат в LB за 6.3–6.8 s; rolling update под нагрузкой — 0 ошибок из 33 461 запроса;
  • трек 1 (129 прогонов, 3 повтора на точку): насыщение на 2 репликах из-за Redis (подтверждено серией с ростом только его CPU); подтверждённое улучшение — инвалидация кэша по версии чата вместо SCAN: ×2.5 RPS, −57% p95; после улучшения потолок смещается к CPU узла.

Ограничения / известные ошибки. На машине разработки нет аппаратной виртуализации, поэтому Docker-стенд прогонялся на GitHub-hosted runner (2 vCPU) тем же compose.yaml (ссылки на прогоны в REPORT.md). Методика трека 1 сокращена (3 уровня, 15 s, 3 повтора). SPOF: LB, PostgreSQL, Redis, узел.

Источники и использование ИИ. pgx, go-redis, x/crypto, документация HAProxy/Compose/PostgreSQL. ИИ-ассистент использовался при реализации и отладке; все результаты — реальные прогоны.

  • Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
  • Контракт и публичные тесты не ослаблены (tests/, contracts/, README, COURSE не изменены).
  • make check и make test выполнены; приложен реальный вывод.
  • Сценарии отказов своего уровня воспроизведены.
  • Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.
  • README задания сохранён, REPORT.md содержит инструкцию именно моего решения.
## Лабораторная 3 Автор / группа: Вейнмайер Андрей Андреевич, БВТ2303 Целевая оценка (3/4/5): 5 Трек 5, если заявлен: трек 1 «Цена масштабирования» **Что реализовано и что перенесено.** Из lab2 перенесены Go-API, PostgreSQL-схема, сессии и кэш в Redis. Добавлено: X-Instance-Id в каждом ответе; обязательный Idempotency-Key (ключ и сообщение в одной транзакции PostgreSQL, конкурентные повторы через разные реплики дают одно сообщение, другой body — 409); HAProxy с active readiness-check и DNS Docker; 2+ взаимозаменяемых реплики без container_name и без внешних портов; однократные миграции отдельным сервисом; drain по SIGTERM (readiness 503 → LB исключает реплику → Shutdown); скрипты stop-one / restore / restart / rolling-update; собственные тесты в `student-tests/`. **Команды запуска из чистого clone:** ```sh sh scripts/init-secrets.sh docker compose --env-file .env up -d --build --wait make test make test-failover ACTION_SCRIPT=scripts/stop-one.sh && sh scripts/restore.sh make test-persistence ACTION_SCRIPT=scripts/restart.sh sh scripts/collect-evidence.sh # все доказательства уровней 3–4 make track1 # эксперименты трека 1 ``` **Результаты проверок** — подробно в REPORT.md, сырые данные в `evidence/`: - smoke, failover ×2, persistence с прежним токеном — PASS; при остановке реплики 0 ошибок, первая запись через 3.4 s; - конкурентная идемпотентность: 10 раундов × 16 параллельных запросов, 0 дублей, 2 реплики; - уровень 4: поочерёдная остановка каждой реплики под нагрузкой — 0 ошибок, 0 потерь, возврат в LB за 6.3–6.8 s; rolling update под нагрузкой — 0 ошибок из 33 461 запроса; - трек 1 (129 прогонов, 3 повтора на точку): насыщение на 2 репликах из-за Redis (подтверждено серией с ростом только его CPU); подтверждённое улучшение — инвалидация кэша по версии чата вместо SCAN: ×2.5 RPS, −57% p95; после улучшения потолок смещается к CPU узла. **Ограничения / известные ошибки.** На машине разработки нет аппаратной виртуализации, поэтому Docker-стенд прогонялся на GitHub-hosted runner (2 vCPU) тем же compose.yaml (ссылки на прогоны в REPORT.md). Методика трека 1 сокращена (3 уровня, 15 s, 3 повтора). SPOF: LB, PostgreSQL, Redis, узел. **Источники и использование ИИ.** pgx, go-redis, x/crypto, документация HAProxy/Compose/PostgreSQL. ИИ-ассистент использовался при реализации и отладке; все результаты — реальные прогоны. - [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами. - [x] Контракт и публичные тесты не ослаблены (`tests/`, `contracts/`, README, COURSE не изменены). - [x] make check и make test выполнены; приложен реальный вывод. - [x] Сценарии отказов своего уровня воспроизведены. - [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens. - [x] README задания сохранён, REPORT.md содержит инструкцию именно моего решения.
Weinmaier_Andrew added 5 commits 2026-10-23 18:14:58 +03:00
- X-Instance-Id, обязательный Idempotency-Key (PostgreSQL, одна транзакция)
- HAProxy + 2..N реплик API, readiness/drain по SIGTERM, однократные миграции
- скрипты stop-one/restore/restart/rolling-update/collect-evidence
- трек 1: параметризованный стенд, cmd/bench, оркестратор и анализ
- workflow реального прогона Docker-стенда на GitHub Actions

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
- доказательства уровней 3–4 (прогон 2 на GitHub runner)
- трек 1: 129 прогонов серий A–E, анализ, графики, подтверждённое улучшение
- Dockerfile: базовые образы закреплены по digest
- собственные тесты перенесены в student-tests/

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Owner

Обнаружены следующие ошибки:

  • Подтверждённая запись может отсутствовать в следующем чтении. В чате с двумя сообщениями: закэшировать историю → в изолированном Redis запретить INCR через ACL SETUSER default -incr → отправить третье сообщение → прочитать историю. Ожидалось три сообщения после ответа 201. Фактически POST вернул 201, строка появилась в PostgreSQL, но GET вернул прежние два сообщения. Ошибка инвалидации игнорируется: internal/repository/redis/message_cache.go:95. Это нарушает требование видимости подтверждённой записи.
  • Принимается полностью пробельный пароль. Регистрация с корректными остальными полями и password = " ".repeat(12) возвращает 201 вместо 400. Нормативная семантика запрещает обязательные строки из одних пробелов; валидатор проверяет только длину: internal/service/validate.go:11.
Обнаружены следующие ошибки: - Подтверждённая запись может отсутствовать в следующем чтении. В чате с двумя сообщениями: закэшировать историю → в изолированном Redis запретить INCR через ACL SETUSER default -incr → отправить третье сообщение → прочитать историю. Ожидалось три сообщения после ответа 201. Фактически POST вернул 201, строка появилась в PostgreSQL, но GET вернул прежние два сообщения. Ошибка инвалидации игнорируется: [internal/repository/redis/message_cache.go:95](https://gitea.privcloud.tech/WeinmaierAndrew/mtusi2026lab3/src/commit/7cd55064d6454da5ed28191ecedf98b7179b03b4/internal/repository/redis/message_cache.go#L95). Это нарушает требование видимости подтверждённой записи. - Принимается полностью пробельный пароль. Регистрация с корректными остальными полями и password = " ".repeat(12) возвращает 201 вместо 400. Нормативная семантика запрещает обязательные строки из одних пробелов; валидатор проверяет только длину: [internal/service/validate.go:11](https://gitea.privcloud.tech/WeinmaierAndrew/mtusi2026lab3/src/commit/7cd55064d6454da5ed28191ecedf98b7179b03b4/internal/service/validate.go#L11).
Weinmaier_Andrew added 3 commits 2026-10-24 03:02:59 +03:00
- версия истории чата хранится в PostgreSQL (chats.version, миграция 0003)
  и растёт в одной транзакции с сообщением; ключ кэша включает её, поэтому
  ошибка любой команды Redis не может вернуть устаревшую историю
- членство и версия читаются одним запросом; INCR/GET версии в Redis удалены
- пароль из одних пробельных символов -> 400 (unit-тест validatePassword)
- student-tests/regressions.py: сценарий проверки с Redis ACL -incr и пароль
- CI: тот же тест против кода до исправления; все серии трека 1 заново
Author
First-time contributor

Исправлено, посмотрите пожалуйста

Исправлено, посмотрите пожалуйста
Owner

Принято. Закрываю МР.

Принято. Закрываю МР.
veprickiy closed this pull request 2026-10-24 16:17:08 +03:00

Pull request closed

Please reopen this pull request to perform a merge.
Sign in to join this conversation.
No Reviewers
No labels
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab3#43