ЛР 4 — БВТ2301 — Васильев — на 5 #87

Closed
VasilevNikita wants to merge 11 commits from VasilevNikita/mtusi2026lab4:solution/bvt2301-vasilev into main
First-time contributor

Лабораторная 4

Автор / группа: Васильев Никита, БВТ2301
Целевая оценка: 5
Трек 2 — согласованность двух хранилищ.

Что реализовано

Добавлены синхронные PNG/JPEG-вложения: PostgreSQL хранит метаданные, приватное S3/SeaweedFS — исходные байты. API имеет bucket-scoped credentials, внутренние filer/master изолированы от API-сети. Проверяются MIME, полное декодирование, лимиты 10 MiB/40 млн пикселей, filename и доступ участника. Строгий JPEG decoder отклоняет обрезанный скан с поддельным EOI. Полная проверка пикселей выполняется в короткоживущем ограниченном процессе: JPEG декодируется native decoder, PNG/APNG — с проверкой всех кадров и суммарного числа пикселей. Последовательность APNG 40 млн → CMYK JPEG 40 млн → RGB JPEG 36 млн → обычный PNG прошла при лимите API 512 MiB: максимальный peak двух API 422 637 568 байт, OOM отсутствует.

Reconciler поддерживает read-only dry-run, повторяемый apply, durable upload intents, grace и актуальный HEAD; неопределённый COMMIT не приводит к слепому удалению оригинала. Исследование: 30 проверок сбоев и девять замеров обхода. При 10/100/1000 добавленных intact-вложениях медианы обхода составили 0,023085/0,170581/1,581705 с.

155 собственных тестов и 88 независимых HTTP-проверок — PASS. Десять одновременных загрузок каждого из двух размеров дали 2 успешные загрузки и 8 контролируемых 429 без OOM API/LB. Подтверждены сохранность после полного рестарта и скачивание через другую API после остановки загрузившей.

Методика и raw: research/README.md, evidence/reconcile-study.json, evidence/upload-memory-final.json, REPORT.md. Поздние исправления cursor, UTF-8 JSON и декодирования изображений отмечены отдельно; исторические результаты не подменяются замерами новой версии. Новая проверка памяти записана в evidence/image-validation-memory.json. Ограничения: нет распределённого COMMIT между БД/S3, исправление остатков после grace; сверка не восстанавливает утраченные байты без backup; один host/storage остаются SPOF.

Запуск из чистого clone

uv sync --locked --python 3.12
make up
make check validate PYTHON=.venv/bin/python
make test
make student-test
make test-persistence ACTION_SCRIPT=scripts/restart.sh
make test-failover ACTION_SCRIPT=scripts/stop-one.sh

Полная инструкция, безопасная остановка и воспроизведение исследования: REPORT.md.

Проверки

Проверено локально из отдельного чистого clone с новыми секретами и volumes: сборка, make check, OpenAPI validation, lint, публичный smoke, собственные тесты, persistence и failover. Дополнительно проверены ошибки валидации, идемпотентность, пауза PostgreSQL, отказ logout при блокировке БД, короткая сессия после restart и восстановление двух API за LB. Runtime и миграции в контейнере побайтно сверены с commit. Удалённый CI отдельно от локальных результатов.

Источники и помощь

Исходный skeleton и контракт преподавателя, официальная документация используемых библиотек и инфраструктуры. Перенесена собственная реализация предыдущих работ. Использована помощь ИИ при реализации, исследовании и проверке. Подробности и ссылки — в REPORT.md.

  • Обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами.
  • Контракт и публичные тесты не ослаблены.
  • make check и make test выполнены; реальный вывод приложен в evidence.
  • Сценарии отказов заявленного уровня воспроизведены.
  • Секреты и приватные ключи вне Git; отчёт не содержит токенов.
  • README задания сохранён; REPORT.md описывает запуск собственного решения.
## Лабораторная 4 Автор / группа: **Васильев Никита, БВТ2301** Целевая оценка: **5** Трек 2 — согласованность двух хранилищ. ## Что реализовано Добавлены синхронные PNG/JPEG-вложения: PostgreSQL хранит метаданные, приватное S3/SeaweedFS — исходные байты. API имеет bucket-scoped credentials, внутренние filer/master изолированы от API-сети. Проверяются MIME, полное декодирование, лимиты 10 MiB/40 млн пикселей, filename и доступ участника. Строгий JPEG decoder отклоняет обрезанный скан с поддельным EOI. Полная проверка пикселей выполняется в короткоживущем ограниченном процессе: JPEG декодируется native decoder, PNG/APNG — с проверкой всех кадров и суммарного числа пикселей. Последовательность APNG 40 млн → CMYK JPEG 40 млн → RGB JPEG 36 млн → обычный PNG прошла при лимите API 512 MiB: максимальный peak двух API 422 637 568 байт, OOM отсутствует. Reconciler поддерживает read-only dry-run, повторяемый apply, durable upload intents, grace и актуальный HEAD; неопределённый COMMIT не приводит к слепому удалению оригинала. Исследование: 30 проверок сбоев и девять замеров обхода. При 10/100/1000 добавленных intact-вложениях медианы обхода составили 0,023085/0,170581/1,581705 с. 155 собственных тестов и 88 независимых HTTP-проверок — PASS. Десять одновременных загрузок каждого из двух размеров дали 2 успешные загрузки и 8 контролируемых 429 без OOM API/LB. Подтверждены сохранность после полного рестарта и скачивание через другую API после остановки загрузившей. Методика и raw: research/README.md, evidence/reconcile-study.json, evidence/upload-memory-final.json, REPORT.md. Поздние исправления cursor, UTF-8 JSON и декодирования изображений отмечены отдельно; исторические результаты не подменяются замерами новой версии. Новая проверка памяти записана в evidence/image-validation-memory.json. Ограничения: нет распределённого COMMIT между БД/S3, исправление остатков после grace; сверка не восстанавливает утраченные байты без backup; один host/storage остаются SPOF. ## Запуск из чистого clone ```sh uv sync --locked --python 3.12 make up make check validate PYTHON=.venv/bin/python make test make student-test make test-persistence ACTION_SCRIPT=scripts/restart.sh make test-failover ACTION_SCRIPT=scripts/stop-one.sh ``` Полная инструкция, безопасная остановка и воспроизведение исследования: [REPORT.md](https://gitea.privcloud.tech/VasilevNikita/mtusi2026lab4/src/branch/solution/bvt2301-vasilev/REPORT.md). ## Проверки Проверено локально из отдельного чистого clone с новыми секретами и volumes: сборка, make check, OpenAPI validation, lint, публичный smoke, собственные тесты, persistence и failover. Дополнительно проверены ошибки валидации, идемпотентность, пауза PostgreSQL, отказ logout при блокировке БД, короткая сессия после restart и восстановление двух API за LB. Runtime и миграции в контейнере побайтно сверены с commit. Удалённый CI отдельно от локальных результатов. ## Источники и помощь Исходный skeleton и контракт преподавателя, официальная документация используемых библиотек и инфраструктуры. Перенесена собственная реализация предыдущих работ. Использована помощь ИИ при реализации, исследовании и проверке. Подробности и ссылки — в REPORT.md. - [x] Обязательный минимум текущей и предыдущих работ сохранён с объявленными переходами. - [x] Контракт и публичные тесты не ослаблены. - [x] make check и make test выполнены; реальный вывод приложен в evidence. - [x] Сценарии отказов заявленного уровня воспроизведены. - [x] Секреты и приватные ключи вне Git; отчёт не содержит токенов. - [x] README задания сохранён; REPORT.md описывает запуск собственного решения.
VasilevNikita added 11 commits 2026-11-06 20:18:15 +03:00
Owner

Принято. Закрываю МР.

Принято. Закрываю МР.
veprickiy closed this pull request 2026-11-07 17:46:46 +03:00

Pull request closed

Please reopen this pull request to perform a merge.
Sign in to join this conversation.
No Reviewers
No labels
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: mtusi2026/mtusi2026lab4#87