Files
mtusi2026lab4/evidence/load-validation.md

15 KiB
Raw Permalink Blame History

Аудит применимости нагрузки — 2026-11-06

Фаза VALIDATION, исходный HEAD 5e49502ae78fa48b992c97418e490666c699726d. Код совпадает с прошедшим review 7a0ebac2aa9e1d8602054ca4c7c1b0c23d3bfad4: diff содержит только девять Markdown-файлов. Публикация не разрешена.

Решение до новых запусков

Серия Решение и основание
Текстовая нагрузка F, 3 повтора по 8 с / 64 клиента Принять forward-final-2026-11-06/load/: измеренный SHA 75b93bbba5f29575d3fca1d013cc7e0770d88082; после него в runtime изменились только PNG images.py/png.py. Текстовый путь, обвязка, зависимости, лимиты и LB неизменны. Повтор не нужен.
Стоимость reconciler, 27 замеров Принять sqlalchemy-2026-11-06/track5/measurements/cost/, SHA 3402fd69d4922e500035a204d957be2cccaeb85a. Изменения identity/messaging и PNG находятся вне измеряемого обхода; SQL/S3, миграции, зависимости, compose и драйвер cost неизменны. API/LB/Valkey были остановлены. HAProxy также менялся, но был остановлен и в обходе не участвовал. Сохраняются dataset 1k/10k/30k/100k, три повтора shallow/deep и page100 на 10k, закреплённые CPU и фильтр фона. Повтор не нужен.
Smoke, persistence/failover, скачивание, S3 IAM/bootstrap, отказы и механизмы reconciler Принять прежние подтверждения неизменённых механизмов с исходными SHA. Новый smoke и upload faults нужны для интеграции PNG. Остальные сценарии автоматически не повторять.
Все прежние upload-memory, включая 64/3 Исторические: новый PNG-инспектор распаковывает IDAT, прежние измерения не доказывают его память/производительность. Повторить только штатные 3 слота × 1/10 MiB × 10/20/40 клиентов × 3 серии; контроль 64 оставить историческим.
PNG 40 MP высокой глубины цвета, ≥10 клиентов Подтверждений нет; выполнить отдельную серию с cgroup, OOM, кодами и проверкой исходных байтов.
Upload во время сверки Повторить только reconcile_track.under_load, 75 с / 3 клиента, с deep-проверкой всех подтверждённых ready. Остальные части demo и cost не повторять.
Полные собственные тесты После PNG-фиксов были только offline/collection; выполнить make student-test с реальными временными зависимостями.

Перед Docker-этапом запущенных контейнеров нет; Docker VM: 16 CPU, 8 217 190 400 байт RAM. Новый project hlpipe-lab4-validation-20261106, working_dir — основной репозиторий, HTTP 18084, stats 24846, свежие volumes. Нагрузочные серии выполняются последовательно. Секреты не выводятся. Остановка только собственных стендов, постоянные volumes сохраняются.

Эта таблица зафиксировала решение до запусков. Выполненные результаты приведены ниже. Реализация, конфигурация, контракт и OpenSpec не менялись.

Выполнено на итоговом runtime

  • make check, make validate, make lint — PASS; OpenSpec strict — 18 PASS (вывод). Новый OpenSpec-цикл не нужен: реализация/требования не меняются, архивы обоих фиксов уже закрыты.
  • make student-test PYTEST_ARGS='-q --tb=short': 719 passed, 19 stack deselected, 2 setup errors: временный RustFS не ответил за 60 с. Причина не локализована, запуск не объявляется полностью успешным. Повтор только двух неисполненных тестов с явными NO_PROXY/no_proxy прошёл: 2 passed за 0,69 с. Итого 721 выбранная проверка исполнена успешно, полного повторного прогона не было. Первый запуск, повтор.
  • make up, make test, проверка штатных лимитов — PASS. Два запущенных контейнера содержат PNG-файлы с SHA-256, совпадающими с прошедшим review кодом. Образ, настройки.
  • Прямой argv из make upload-faults с новым выходным путём: 7 PASS. Исторический evidence/upload-faults.txt не перезаписан. Битый IDAT/повторный IHDR → 415; 54 ответа негативного теста, 0×5xx. Компенсация, crash/grace, обрыв, stall и идущие медленные передачи проверены через LB/RustFS. Raw.
  • Отдельные точные PNG из review: 415, до/после 7 строк и 7 объектов, расхождений нет. Валидные PNG и JPEG → 201; второй участник получил идентичные байты с правильным MIME. Ответы/сверка.
  • 10 синхронно стартующих загрузок PNG RGBA16 8000×5000: 311 100 байт на проводе, 320 005 000 байт распакованных строк, Pillow.load независимо подтвердил файл до нагрузки. 10×201, 10 побайтных скачиваний, максимум API 283 983 872 байта (270,828 MiB) при лимите 512 MiB; OOM/oom_kill/max = 0, LB 24,2 MiB. Драйвер, raw.

Предварительные попытки png-roundtrip.txt и high-depth.txt завершились на регистрации синтетического пользователя (недопустимый дефис / длина username >32), до загрузок/замера. Исправлены только вспомогательные драйверы в evidence; приложение не менялось. Оба вывода сохранены, повторные команды имеют суффикс -retry, успешные серии не повторялись.

Новая матрица памяти

Агрегатор проверил 18 JSON, состав матрицы, SHA, две обслуживающие реплики и число запросов: сводка. Команды make upload-memory ARGS='--slots 3 --out evidence/png-final-2026-11-06/upload-memory/runN' выполнены для N=1,2,3 ровно по одному разу; 6 точек на серию, два upload на клиента. Входы — случайные RGB8 PNG из штатного генератора: 1 048 276 / 10 485 256 байт. Два API по 1 CPU/512 MiB, два worker, 3 upload/2 image-check слота на worker; MALLOC_MMAP_THRESHOLD_=131072. Перед каждой точкой API/LB пересозданы для нового cgroup peak.

Итог: 840/840×201, ошибок/таймаутов/OOM-kill нет. API ≤440,0 MiB, LB ≤31,1 MiB при лимитах 512/128 MiB. После серии shallow-аудит обнаружил ровно 859 ready и 859 объектов, без pending/orphan/missing/size mismatch: сверка. Это сверка размеров/наличия, не повторное хеширование всех крупных объектов.

PNG / клиенты API peak по повторам, MiB p95 по повторам, мс Успехи
~1 MiB / 10 278,3 / 279,8 / 279,4 134,3 / 241,0 / 257,7 60/60
~1 MiB / 20 283,4 / 284,4 / 284,5 243,8 / 310,2 / 226,6 120/120
~1 MiB / 40 289,5 / 290,4 / 289,4 373,4 / 417,6 / 367,6 240/240
~10 MiB / 10 394,8 / 391,3 / 391,8 1236,1 / 3287,8 / 1520,3 60/60
~10 MiB / 20 427,6 / 440,0 / 425,0 2514,0 / 2632,8 / 3632,6 120/120
~10 MiB / 40 439,2 / 428,9 / 438,4 6534,9 / 4256,0 / 5971,4 240/240

Фон до, во время 1, 2, 3, после: только собственные контейнеры. Functional tests/build завершились до нагрузочных серий. macOS, частоты, файловый кэш и диск физического хоста не изолированы; результаты не SLO и не предел архитектуры. Высокая глубина проверена на одном сильно сжатом RGBA16-паттерне; он не представляет все допустимые PNG. Старый контроль 64/3 не выдаётся за современный A/B.

Для конкурентной сверки выбран второй свежий project hlpipe-lab4-validation-reconcile-20261106 с тем же проверенным образом и штатными ресурсами. Первый project остановлен командой make down без удаления volumes. Отдельный dataset сохраняет методику tiny-PNG 75 с / 3 потока и не добавляет к deep-аудиту 840 крупных объектов из независимого опыта RAM. Это единственный новый запуск затронутой части demo.

Конкурентная сверка и итог применимости

Команда вызывает только reconcile_track.under_load: 75 с, 3 потока, tiny PNG 8×8, привязка каждого десятого вложения к сообщению. 3341/3341×201, 67 проходов --apply, errors=0/skipped=0. Удалены только 3 внедрённых старых orphan. Независимый deep-аудит всех 3341 ready подтвердил SHA-256, lost_ready=0; хеширование заняло 65,637 с и не включено в 75 с загрузок. Raw, ожидаемые id/SHA, oracle.

Ограничение выборочного запуска: до нагрузки новый bucket/attachments были пусты, поэтому reconcile-inject.sh stale-pending не нашёл базовую строку chat/owner и создал 0, а не запрошенные 3 pending. Raw это показывает. Новый результат не доказывает очистку внедрённых pending под нагрузкой; эта незатронутая часть сохраняется из прежнего полного demo. Затронутый PNG-путь и сохранность всех 201 подтверждены, повторять успешную серию не требуется, поскольку механизм удаления pending не изменялся. Наблюдения свежих объектов/намерений также есть в raw.

Фон и после: только собственный project. Строка -- 0.00% 0B / 0B в docker stats не содержит имени контейнера и не используется для расчётов. После нагрузки публичный smoke прошёл.

Все обязательные затронутые сценарии закрыты. Приняты новые 18 точек RAM, один опыт 40 MP и один опыт upload+reconcile; пригодные 3 текстовых и 27 cost-прогонов не повторялись. Открытых major не выявлено. Сохранён известный minor Unicode-surrogate → HTTP 500 (finding); он отражён в ограничениях REPORT. Отрицательный вывод о линейном времени и разброс deep 100k сохранены.

Context7 /docker/compose использован для проверки изоляции project и поведения down без --volumes. PUBLICATION не разрешена, push и Telegram не выполнялись.

Оба своих project завершены make down без -v; проверены labels: контейнеров 0, по три постоянных volume на project, всего шесть. Временных test fixtures не осталось. Инвентаризация, основной down, reconcile down.

Финальный аудит ссылок/JSON/границ изменений и шаблонов секретов: вывод. Найден только известный синтетический invalid-bearer из исторического тестового лога; реальные секреты не найдены, .env, secrets/, volumes/ не tracked. Значения не выводились. В новых .txt удалены только хвостовые пробелы; числа, порядок строк и JSON не менялись.