Files
mtusi2026lab4/evidence/summary.md

7.0 KiB
Raw Permalink Blame History

Сводка проверок

Шаг Что проверяет Результат Время, с Файл
check offline contract check (make check) PASS 0 evidence/check.txt
stack stand layout: replicas, ports, limits, networks, secrets, S3 PASS 3 evidence/stack.txt
smoke public smoke via the balancer (make test), with attachment PASS 1 evidence/smoke.txt
attachments lab4: files, limits, damaged images, MIME, filenames, access, attachment_ids PASS 5 evidence/attachments.txt
s3-security lab4: private bucket outside API, limited API key, no console/ports, idempotent bootstrap PASS 10 evidence/s3-security.txt
consistency lab4: aborted upload, crash between S3 and DB, janitor, orphans, S3 outage PASS 133 evidence/consistency.txt
upload-memory lab4: >=10 concurrent uploads, peak memory of api replicas PASS 37 evidence/upload-memory.txt
balancing balancing, shared sessions/data/files, X-Instance-Id PASS 2 evidence/balancing.txt
idempotency Idempotency-Key, parallel same key via replicas PASS 2 evidence/idempotency.txt
student-tests lab1/lab2 API tests via the balancer PASS 3 evidence/student-tests.txt
race lab2 races via the balancer PASS 1 evidence/race.txt
db PostgreSQL: rollback, FK, Argon2id, unique keys, migrations PASS 6 evidence/db.txt
redis Redis as the session store PASS 3 evidence/redis.txt
explain EXPLAIN of the history page (full plans: explain-history.txt) PASS 1 evidence/explain.txt
failover public failover test for every replica, file downloaded via the other one (make test-failover) PASS 43 evidence/failover.txt
load public load generator, 30 s, concurrency 4 PASS 30 evidence/load.txt
failures Redis and PostgreSQL outages via the balancer PASS 56 evidence/failures.txt
persistence public persistence test incl. S3 + proof of real restarts (make test-persistence) PASS 48 evidence/persistence.txt

Замеры

Машина: Windows 10, AMD64 Family 26 Model 68 Stepping 0, AuthenticAMD; Docker VM: 16 CPU, 15.2 GiB RAM; клиент Python 3.11.1; дата прогона 2026-10-22, commit c942c61 + uncommitted changes. Лимиты контейнеров: api 1 CPU / 512 MiB каждая, postgres и s3 (SeaweedFS) по 1 CPU / 512 MiB, redis и lb по 0,5 CPU / 128 MiB, janitor 0,25 CPU / 192 MiB.

Публичный тест отказа (make test-failover, 15 с записи во время остановки реплики):

Прогон Остановлена реплика Реплик до отказа Успешных записей Неудачных попыток (повторены с тем же ключом) Первая запись после hook, с
1 343119df2488 2 123 0 4.422
2 d590adc21943 2 124 0 4.531

Одновременные загрузки (student-tests/upload_memory.py, перед каждым сценарием реплики перезапускаются, лимит api 512 MiB / 1 CPU). Пик RSS — VmHWM процесса API; cgroup — память контейнера, включая page cache временных файлов:

Сценарий Одновременно Объём, MiB Время, с (p50 / max) Реплика: загрузок RSS до, MiB Пик RSS, MiB Рост, MiB Пик cgroup, MiB
10 x ~9.5 MiB PNG (noise) 10 94.9 2.87 / 3.52 343119df2488: 5 94.8 107.6 12.8 136.0
d590adc21943: 5 91.2 104.5 13.3 136.2
10 x 40 Mpx PNG (8000x5000 RGB) 10 1.1 0.85 / 1.09 343119df2488: 5 95.1 96.6 1.5 86.5
d590adc21943: 5 92.1 96.6 4.6 83.5
20 mixed: large + 40 Mpx + JPEG 20 133.2 1.5 / 1.78 343119df2488: 10 93.2 116.2 23.0 158.2
d590adc21943: 10 95.0 118.6 23.6 167.8

Один PNG 8000x5000 RGB внутри контейнера api, дополнительный пик RSS: наивно (тело целиком в памяти + полное декодирование Pillow) 161 MiB, потоковая проверка 0 MiB. 10 таких наивных загрузок одновременно не поместились бы в 512 MiB.

Публичный генератор нагрузки (tests/load.py, closed loop, concurrency 4, 30 с, 2 реплики): 239.325 успешных POST/с, ошибок 0 (доля 0.0), задержка успешных p50 16.0 мс, p95 32.0 мс, p99 32.0 мс.

Воздействие Что ожидаем Что наблюдали Время восстановления / потеря данных
публичный make test-failover для каждой реплики запись продолжается не позже 10 с, подтверждённые сообщения на месте, дублей нет PASS 2 раз(а), неудачных попыток: 0, 0 первая запись после hook через 4.422, 4.531 с (hook ждёт остановки ~4 с); потерь нет
перезапуск всего стенда (restart hook: postgres, redis, s3, api, janitor, lb) данные, файл и прежний токен живы PASS, те же контейнеры с новым временем старта 47.0 с до готовности; потерь нет
docker compose stop s3 (SeaweedFS остановлен) загрузка и скачивание -> 503, метаданные, сообщения и /health/ready работают upload 503 за 19453 мс, download 503, остальное 200/201 после start файлы на месте; uploading-строку убрал janitor; потерь нет
docker compose pause s3 (SeaweedFS завис) то же, но через таймауты S3-клиента upload 503 за 14891 мс (2 попытки x 5 с + откат 2 с) после unpause файлы на месте; потерь нет
падение между PUT в S3 и COMMIT в БД (код API в контейнере, finish_upload падает) вложение не видно, janitor не трогает его до конца grace period, потом удаляет объект и строку GET/прикрепление -> 404; janitor: свежая строка сохранена, dry-run только отчёт, затем удалено мусора не осталось; повторный проход ничего не делает
обрыв загрузки клиентом (9 МБ заявлено, отправлено 0,2 и 3 МБ) ничего не сохраняется строк и объектов не прибавилось, временных файлов 0 мгновенно