Files
mtusi2026lab2/evidence/load-validation.md
T

43 lines
7.3 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Аудит применимости измерений ЛР5
Фаза validation, 2026-11-07. Исходный HEAD `b30e2f6a84419d1ca64525ffb40df92183cccaef`, runtime прошёл review на `42575281b352d35bda17ee7601bae5548a996e91` (R). Diff R → HEAD содержит только REPORT, AGENTS и два документа evidence. Реализация в этой фазе не меняется; push запрещён.
Выбран трек 2 README — идемпотентность pipeline. Матрица throughput/prefetch и SLO относятся к невыбранному треку 1; новые SLO не вводятся.
## Принятые серии
Основная база D: `0e921116610d289716af0a40ec823376eb8bbcbc`, каталог [forward-final-2026-11-06](forward-final-2026-11-06/RESULTS.md).
| Серия | Решение и основание |
| --- | --- |
| Track run1/2/3: по 13 сценариев, 8 инвариантов, 13 ID, 58 объектов | Принимаются функциональные результаты всех трёх повторов. Все обязательные повторы уже выполнены. SQL/outbox/lease/fencing/versioning не изменены. Старый sample PNG входит в побайтную проверку совместимости renderer. Влияние новой policy проверяется адресно. Полный track2 повторно не запускается. |
| Level4: 17 сценариев, 8 инвариантов, 33 ID, 116 объектов | Принимаются незатронутые результаты; адресно дополняются delivery/ack/retry и новые PNG. |
| Smoke/persistence/failover | Принимаются сохранность данных, сессий и отказ реплики: их реализация и конфигурация не менялись. Новый smoke служит проверкой собранного стенда. Полные persistence/failover повторно не запускаются. |
| Network regressions, upload-negative, cache-outage, HAProxy errors | Принимаются: входная валидация, кэш и LB не менялись. |
| 819 student tests / 1 skip | Исторический результат D. Полный набор запускается на R для новых регрессий и real-broker тестов. |
| 430 offline + 20 boundaries, 114 идентичных вариантов | Принимаются для R; не заменяют HTTP/Linux и реальный отказ PostgreSQL. |
Условия D: Darwin arm64, Docker 28.3.2, 16 CPU / 8 217 190 400 байт VM RAM; основной изолированный project `mtusi2026lab5`, API 18085, stats/UI 25085/25086. Compose, Dockerfile и uv.lock не изменены. API ×2 по 1 CPU/512 MiB; worker 2 CPU/1 GiB, concurrency/prefetch=2, renderer 448 MiB/30 с. Fault override: lease 5 с, stall 15 с, backoff 1 с, poll 0.5 с. Синтетический dataset: sample 320×200, матрица 26 изображений, 40 Мп fixture. Volumes сохранялись. Срезы условий не показывают других работающих проектов, но непрерывного контроля нагрузки хоста нет.
Run2/3 имеют несогласованные UTC/elapsed: функциональный результат сохранён, время исключено из performance-выводов. Повторять корректные сценарии из-за неприменимого времени не требуется. Старые корневые evidence до SQLAlchemy, промежуточные FAIL и прерванные серии не используются как PASS.
## Недостающие и затронутые проверки
1. RabbitMQ 4.1.8: применение policy на сохранённом volume; настоящий отказ PostgreSQL после опубликованного outbox, >10 nack, ready без replay, неизменные job/attempt/DLQ.
2. HTTP tRNS grayscale/RGB разных глубин, точный сосед RGB16, Adam7/filter/EXIF, v1/v2 и повтор старой job. Linux 40 Мп, штатные и принудительные лимиты, последующее обычное задание.
3. Адресная suite: duplicate/reorder/fencing, COMMIT/ack, malformed/DLQ, retry-exhaustion/replay. Причина — изменённая policy доставки; весь baseline и три track2 повтора не повторяются.
4. Текущие check/validate/lint/student-test, OpenSpec, SHA и отсутствие секретов в tracked файлах.
Результаты и команды этой фазы сохраняются в `final-validation-2026-11-07/`. Завершённые результаты не перезаписываются. Итог: **validation blocked, 1 major** — четыре 40 Мп PNG tRNS не достигают ready при штатном лимите памяти. Подробности и завершённые проверки — [RESULTS](final-validation-2026-11-07/RESULTS.md), [findings](final-validation-2026-11-07/findings.json). Runtime не изменён, публикация запрещена. Повторять после fix только ресурсные/tRNS проверки и сценарии, которые затронет фактический diff.
## Итог адресной квалификации
- Реальный PostgreSQL outage: 12 nack/requeue, восстановление без replay, job/attempt/DLQ сохранены; 8 инвариантов PASS.
- HTTP PNG: 8 fixtures, 48 сравнений вариантов v1/v2 с независимым эталоном, stale/duplicate noop; 8 инвариантов PASS.
- Delivery subset: 12 сценариев, 8 инвариантов, 11 ID / 47 объектов PASS. Одна новая запись DLQ ожидаема от malformed message.
- Linux 40 Мп tRNS: 4 FAIL (processing_failed); принудительные лимиты и последующая обычная работа PASS. MemoryError подтверждён отдельным пробником. Эти результаты не заменяют PASS старого обычного PNG 40 Мп и не позволяют обещать готовность новых путей на границе.
- Check/validate/lint PASS; student-test 980 passed / 1 Linux-only skip; OpenSpec 22 PASS, changes=[]; 64 исторических хеша сверены. Код и нормативные файлы неизменны.
Сохранены также непригодный первый outage (обвязка автоматически запустила БД), неуспешный docker cp диагностических файлов и ранний no_orphans до sweep. Повторён только неверно выполненный outage, перенос пробника и read-only проверка cleanup; результаты успешных серий не перезаписывались. Диагностика памяти повторяет только выявленные неуспешные пути, чтобы установить причину.