ЛР 5 — БПИ2303 — Лазарев — на 3 #68

Closed
zemiles wants to merge 9 commits from zemiles/mtusi2026lab5:solution/bpi2303-lazarev into main
9 Commits
Author SHA1 Message Date
zemiles 3c9709b39e Указать ссылку на сдачу лабораторной на 4 2026-11-13 21:58:50 +03:00
zemiles 27f30afdad Отчёт и evidence: исправления по внешнему аудиту F01–F17, проверка из чистого clone
- раздел «Внешний аудит»: замечание -> исправление -> доказательство,
  что сознательно не сделано
- исправлены опровергнутые утверждения (draft и память, метаданные, лимиты)
- evidence/ из полного прогона run_all.sh в чистом clone: 30 проверок, overall=0;
  before-fix/ — воспроизведения дефектов до исправления
2026-11-13 21:19:10 +03:00
zemiles 5d60a85cc1 Аудит F10, F14, F15, F16: rolling update, тесты lab4, CI приложения, тест памяти
- F10: rolling-update.sh собирает migrate (единственный сервис с build),
  проверяет APP_VERSION в образе, в новой реплике и в ответах через LB;
  реально выполнено обновление 1 -> 2 (evidence/rolling-update.txt)
- F14: s3_outage.py переписан под lab5 (503 в API, retry в worker, принятое
  задание доходит до ready); устаревший consistency_faults.py удалён
- F15: .github/workflows/app.yml — сборка, готовность, smoke и регрессии на
  изолированном стенде, логи при ошибке, очистка
- F16: upload_memory.py с явными критериями и ненулевым кодом выхода, размер
  в каждой записи, progressive JPEG в смеси
- run_all.sh: все регрессии аудита, make validate, регрессия lab3, rolling update
2026-11-13 21:02:54 +03:00
zemiles a71b445019 Аудит F01, F11, F12, F13: гонка janitor/replay, версия pipeline, схема сообщения, срок задания
- F01: janitor под блокировкой jobs+attachments перепроверяет условие, снимает
  staging_key и только после COMMIT удаляет объект; replay перечитывает
  staging_key отдельным запросом под блокировкой вложения (в READ COMMITTED
  соединённые колонки могли остаться из старого снимка); тест трёх порядков,
  включая чередование из аудита (учебная пауза JANITOR_PAUSE_AFTER_SELECT_SECONDS)
- F11: pipeline_version пишется при создании вложения; API не стартует с
  неподдерживаемой версией
- F12: строгий разбор по jobs.schema.json (bool, RFC 3339, traceparent,
  tracestate); 17 случаев совпадают с jsonschema Draft 2020-12
- F13: единый срок задания на чтение staging, transform и запись; после срока
  аренда не продлевается, работа прерывается как processing_timeout
2026-11-13 20:56:05 +03:00
zemiles 79430df3bf Аудит F03, F08, F09, F17: общий срок приёма тела, Unicode, проверка до 200, формат ошибок
- F03: тело читается через read1 (один recv) с пересчётом общего срока перед
  каждым чтением: upload, JSON (JSON_BODY_TIMEOUT_SECONDS) и дочитывание
  отклонённого тела; до исправления клиент «по байту» держал приём > 20 с
  при сроке 5 с
- F08: непарный суррогат в JSON -> 400 invalid_request вместо 500
- F09: объект скачивается во временный файл и сверяется (размер, SHA-256)
  до отправки 200; при расхождении 503
- F17: send_error в общем JSON-формате с X-Request-Id/X-Instance-Id,
  неподдержанный метод -> 405, у HEAD без тела
- тесты api_negative_lab5.py, slow_client.py, progressive_upload.py
2026-11-13 20:45:40 +03:00
zemiles eac741349a Аудит F02, F04–F07: проверка JPEG в подпроцессе, фильтры PNG, tRNS, метаданные
- F04: Pillow 13.0.0, urllib3 2.8.0, minio 7.2.20
- F02: пробное декодирование JPEG вынесено в src/jpeg_probe.py (RLIMIT_AS,
  RLIMIT_CPU, oom_score_adj); замер progressive 4:4:4 ~40 Мпикс — 252 MiB;
  DECODE_CONCURRENCY=1, память API 512 MiB; до исправления 6 одновременных
  загрузок убивали обе реплики (evidence/before-fix/progressive-oom.txt)
- F05: проверка байта фильтра каждой строки PNG (включая Adam7), PLTE, IEND
- F06: прозрачность tRNS у RGB и L
- F07: info очищается перед сохранением вариантов; тест проверяет сырые
  маркеры JPEG и чанки WebP
2026-11-13 20:40:07 +03:00
zemiles 98aca383b8 Перепроверка из чистого clone: evidence, исправление теста окон D/E, отчёт 2026-11-13 17:02:32 +03:00
zemiles 3ebd674062 Исправить замечания перепроверки: непредусмотренные ошибки worker, pull_policy, тест окна D 2026-11-13 16:42:44 +03:00
zemiles 13bec4ab8b ЛР 5 — БПИ2303 — Лазарев — на 4
Асинхронная обработка вложений: RabbitMQ 4.1 (quorum-очереди, publisher
confirms, manual ack, DLQ), transactional outbox, отдельный worker.

- upload: оригинал в staging S3, затем одной транзакцией queued + jobs +
  outbox -> 202; API к брокеру не подключается
- relay: публикация outbox с confirm, reaper истёкших аренд, redrive
- worker: claim по строке jobs, аренда с heartbeat и fencing по
  lease_token, transform в подпроцессе с RLIMIT_AS/RLIMIT_CPU/таймаутом,
  thumbnail 256, crop 128, WebP 1280 по детерминированным ключам
- retry с backoff и jitter, постоянные/временные ошибки, реестр failed,
  ops replay (ready не повторяется), DLQ для невалидных сообщений
- janitor: очистка staging и сирот; миграция 004 с backfill вложений lab4
- тесты отказов: окна COMMIT/publish, крахи worker до/после S3 и ack,
  заморозка worker, всплеск загрузок, права брокера; evidence/ и REPORT.md
2026-11-13 16:28:18 +03:00