ЛР4 - БВТ2301 - Никитин - на 5 #40

Closed
AndrewNikkk wants to merge 2 commits from AndrewNikkk/mtusi2026lab4:solution/nikitin-bvt2301 into main
First-time contributor

Лабораторная 4

Автор / группа: Никитин Андрей Александрович / БВТ2301
Целевая оценка (3/4/5): 5
Трек 5, если заявлен: трек 1 — прямой (presigned) upload

Что реализовано и что перенесено:

  • Lab3 → lab4: пользователи/чаты/сообщения, Redis-сессии, Idempotency-Key, LB ×2 API, graceful drain.
  • Оценка 4: private MinIO, limited S3 creds, proxy POST /attachments (magic + stb_image), компенсация Put→PG / DeleteObject, gc_orphans, persistence/failover hooks, лимит concurrent uploads (RSS).
  • Оценка 5 / трек 1: direct_uploads + presigned PUT (minio-cpp SigV4), complete (size/sha256/image), abort, GC незавершённых; proxy endpoint сохранён; сравнение RAM/трафика proxy vs direct (≥2 размера).

Команды запуска из чистого clone:

cp .env.example .env   # локальные POSTGRES_*/MINIO_*/S3_BUCKET
mkdir -p secrets && # database_url, cache_url, s3_* (см. REPORT.md)
docker compose --env-file .env up -d --build
curl -fsS http://127.0.0.1:8080/health/ready
make check && make test BASE_URL=http://127.0.0.1:8080
sh student-tests/run_grade3.sh
sh student-tests/run_grade4.sh
sh student-tests/run_grade5_track1.sh
make test-persistence ACTION_SCRIPT=scripts/restart.sh
make test-failover ACTION_SCRIPT=scripts/stop-one.sh

Результаты проверок и ссылка на REPORT.md:

  • Подробности, таблицы доказательств и эксперимент трека 1: REPORT.md.
  • Student-tests grade3/4/5 track1 — PASS на локальном стенде.
  • Evidence: evidence/load_uploads.json, evidence/resilience_grade4.txt, artifacts/track1/results.tsv.
  • Ветка решения: solution/nikitin-bvt2301.

Ограничения / известные ошибки:

  • Без compose.presign.yaml PUT к MinIO — с контейнера на сети compose (порты 9000/9001 на хост не публикуются).
  • Complete direct-upload кратковременно GetObject'ит объект для verify (фаза отдельно от transfer).
  • Нет HA БД/MinIO; нет thumbnail/вариантов (lab5); openapi расширений трека 1 нет (факультативный API).

Источники и использование ИИ:

  • Контракт/тесты курса; PostgreSQL 16, Valkey, Nginx, MinIO, libpqxx 7.10.0, libsodium, hiredis, nlohmann/json, minio-cpp v0.3.0, stb_image.

  • Помощь ИИ: Cursor (реализация, отладка, отчёт).

  • Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.

  • Контракт и публичные тесты не ослаблены.

  • make check и make test выполнены; приложен реальный вывод.

  • Сценарии отказов/безопасности своего уровня воспроизведены.

  • Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens.

  • README задания сохранён, REPORT.md содержит инструкцию именно моего решения.

## Лабораторная 4 Автор / группа: Никитин Андрей Александрович / БВТ2301 Целевая оценка (3/4/5): **5** Трек 5, если заявлен: **трек 1 — прямой (presigned) upload** Что реализовано и что перенесено: - Lab3 → lab4: пользователи/чаты/сообщения, Redis-сессии, Idempotency-Key, LB ×2 API, graceful drain. - Оценка 4: private MinIO, limited S3 creds, proxy `POST /attachments` (magic + stb_image), компенсация Put→PG / DeleteObject, `gc_orphans`, persistence/failover hooks, лимит concurrent uploads (RSS). - Оценка 5 / трек 1: `direct_uploads` + presigned PUT (`minio-cpp` SigV4), complete (size/sha256/image), abort, GC незавершённых; proxy endpoint сохранён; сравнение RAM/трафика proxy vs direct (≥2 размера). Команды запуска из чистого clone: ```sh cp .env.example .env # локальные POSTGRES_*/MINIO_*/S3_BUCKET mkdir -p secrets && # database_url, cache_url, s3_* (см. REPORT.md) docker compose --env-file .env up -d --build curl -fsS http://127.0.0.1:8080/health/ready make check && make test BASE_URL=http://127.0.0.1:8080 sh student-tests/run_grade3.sh sh student-tests/run_grade4.sh sh student-tests/run_grade5_track1.sh make test-persistence ACTION_SCRIPT=scripts/restart.sh make test-failover ACTION_SCRIPT=scripts/stop-one.sh ``` Результаты проверок и ссылка на REPORT.md: - Подробности, таблицы доказательств и эксперимент трека 1: [`REPORT.md`](../REPORT.md). - Student-tests grade3/4/5 track1 — PASS на локальном стенде. - Evidence: `evidence/load_uploads.json`, `evidence/resilience_grade4.txt`, `artifacts/track1/results.tsv`. - Ветка решения: `solution/nikitin-bvt2301`. Ограничения / известные ошибки: - Без `compose.presign.yaml` PUT к MinIO — с контейнера на сети compose (порты 9000/9001 на хост не публикуются). - Complete direct-upload кратковременно GetObject'ит объект для verify (фаза отдельно от transfer). - Нет HA БД/MinIO; нет thumbnail/вариантов (lab5); openapi расширений трека 1 нет (факультативный API). Источники и использование ИИ: - Контракт/тесты курса; PostgreSQL 16, Valkey, Nginx, MinIO, libpqxx 7.10.0, libsodium, hiredis, nlohmann/json, minio-cpp v0.3.0, stb_image. - Помощь ИИ: Cursor (реализация, отладка, отчёт). - [x] Весь обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами. - [x] Контракт и публичные тесты не ослаблены. - [x] make check и make test выполнены; приложен реальный вывод. - [x] Сценарии отказов/безопасности своего уровня воспроизведены. - [x] Все секреты и приватные ключи находятся вне Git; отчёт не содержит tokens. - [x] README задания сохранён, REPORT.md содержит инструкцию именно моего решения.
AndrewNikkk added 1 commit 2026-10-30 21:14:44 +03:00
Owner

Подтверждены две существенные проблемы.

  1. [P1] Старая подписанная ссылка перезаписывает готовый оригинал.
    Воспроизведение: init → PUT PNG размером 111 817 байт → complete 201 → повторный PUT по той же ссылке с 20 байтами текста. Повторный PUT вернул 200; участник скачал эти 20 байт вместо изображения, тогда как метаданные сохранили прежний SHA-256. Ожидалось сохранение проверенного оригинала. При complete публикуется тот же доступный для PUT ключ: src/main.cpp:1994.
  2. [P1] Конкурентный complete удаляет подтверждённый объект.
    Четыре одновременных complete одной загрузки дали один 201 и три 500. Проигравшие INSERT получили конфликт attachments_pkey и выполнили компенсационное удаление общего объекта. Затем S3 вернул NoSuchKey; download ответил HTTP 200, но оригинал не вернул. Ожидалось сохранение одного готового вложения при конкурентных повторах. Место удаления: src/main.cpp:2008.
Подтверждены две существенные проблемы. 1. [P1] Старая подписанная ссылка перезаписывает готовый оригинал. Воспроизведение: init → PUT PNG размером 111 817 байт → complete 201 → повторный PUT по той же ссылке с 20 байтами текста. Повторный PUT вернул 200; участник скачал эти 20 байт вместо изображения, тогда как метаданные сохранили прежний SHA-256. Ожидалось сохранение проверенного оригинала. При complete публикуется тот же доступный для PUT ключ: [src/main.cpp:1994](https://gitea.privcloud.tech/AndrewNikkk/mtusi2026lab4/src/commit/3223dd469a7423222b0b0e2b8e324972cf761595/src/main.cpp#L1994). 2. [P1] Конкурентный complete удаляет подтверждённый объект. Четыре одновременных complete одной загрузки дали один 201 и три 500. Проигравшие INSERT получили конфликт attachments_pkey и выполнили компенсационное удаление общего объекта. Затем S3 вернул NoSuchKey; download ответил HTTP 200, но оригинал не вернул. Ожидалось сохранение одного готового вложения при конкурентных повторах. Место удаления: [src/main.cpp:2008](https://gitea.privcloud.tech/AndrewNikkk/mtusi2026lab4/src/commit/3223dd469a7423222b0b0e2b8e324972cf761595/src/main.cpp#L2008).
AndrewNikkk added 1 commit 2026-11-06 04:24:30 +03:00
Owner

Принято. Закрываю МР.

Принято. Закрываю МР.
veprickiy closed this pull request 2026-11-07 17:46:31 +03:00

Pull request closed

Please reopen this pull request to perform a merge.
Sign in to join this conversation.
No Reviewers
No labels
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab4#40