docs: record pipeline-reliability verify evidence on 399da05

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
2026-10-31 19:51:32 +03:00
co-authored by Claude Opus 5.5
parent 399da054f2
commit d6bd0a5fec
9 changed files with 152 additions and 81 deletions
@@ -556,7 +556,7 @@ Replay `invalid_image` разрешён: оператор мог поправи
10. **Окно старта интерпретатора при 0,25 CPU длиннее:** `docker compose start relay`, сразу `stop` — SIGTERM приходит до первых строк `__main__`, PID 1 без обработчика его отбрасывает, SIGKILL через 10 с, код 137. Через 0,6 с после старта — «Stopped relay before startup», код 0. Работы в этот момент у процесса нет, поэтому не правится; то же окно названо в `docker.md` («десятки миллисекунд» — при 1 CPU).
11. **Откат реплик требует override (отклонение от Migration Plan в propose):** `make rolling_update COMMIT=7f38948 MIGRATE=0` на новом compose давал загрузку 503: у `api` больше нет адреса и пароля брокера, а прежний код публикует сам. Добавлен `infra/rollback/broker.compose.yml`, команда отката в плане и `balancer.md` обновлена. Постоянно давать репликам пароль нельзя (решение 1).
12. **Задача 14.1:** откат с override, прежние worker и уборщик, relay остановлен: `make test` — PASS; строка нового кода на прежней реплике — 200, 3 варианта, байты всех вариантов — 200, сообщение со ссылкой — 201, история — 200; загрузка на прежнем образе — `ready`, один thumbnail. Вперёд по плану: `lb_stats` без ручных состояний, новая загрузка — 3 варианта, вложение прежнего образа — `ready`, один thumbnail, `original` и `thumbnail` — 200, `crop` и `optimized` — 404; `make reconcile` — код 0, `found` пусто.
13. **Память worker (задача 9.6, расчёт решения 7):** два PNG 10 MiB одновременно: `VmHWM` процесса 1 — 158 МиБ (`VmRSS` до 109, после 111), `render_peak_kib` ~84 МиБ на файл, `render_ms` 928, контейнер `memory.peak` 261 МиБ; снято на рабочем дереве, файл на commit — `evidence/worker/memory.md`, задача 16.8. На самом дорогом файле, сером 16 бит 40 Мпкс, пик процесса 405 МиБ (у RGBA — 357, таблица проб): 158 + 2 × 405 = 968 МиБ < 1 ГБ. Оценка решения 7 (130 МиБ) была занижена на 28 МиБ, бюджет сходится. Лимит не менялся.
13. **Память worker (задача 9.6, расчёт решения 7):** два PNG 10 MiB одновременно: `VmHWM` процесса 1 — 158 МиБ (`VmRSS` до 109, после 111), `render_peak_kib` ~84 МиБ на файл, `render_ms` 928, контейнер `memory.peak` 261 МиБ; снято на рабочем дереве. На `399da05` (`evidence/worker/memory.md`, задача 16.8): те же файлы — `VmHWM` 159, `memory.peak` 261; самый дорогой — серый 16 бит на 40 Мпкс и ~10 MiB файла: пик процесса 414 МиБ, `memory.peak` 905 МиБ, OOM нет (у RGBA на обеих границах 366, без тела 357); оценка суммой 159 + 2 × 414 = 987 МиБ < 1 ГБ. Оценка решения 7 (130 МиБ) была занижена, бюджет сходится. Лимит не менялся.
14. **Регрессии задачи 10.9** (каждая применена в рабочем дереве, откачена, хэши `src` совпали со снимком до них; образ собирался из дерева):
- отметка до подтверждения: `test_relay_killed_after_confirm` — красный, `published_at` есть после KILL до подтверждения; `test_upload_with_broker_paused` — зелёный;
- claim при живой аренде: `test_duplicate_during_processing` — красный, нет записи `busy`;
@@ -579,4 +579,4 @@ Replay `invalid_image` разрешён: оператор мог поправи
18. **Группа 15 на `e2a6427`:** полный `make failure_checks` при остановленном рабочем стенде — 140 из 140, pytest 2373 с, правок тестов нет, правка п. 15 прошла в полном наборе. Метка `pipeline-reliability` снята первой, на чистом дереве: `git.dirty` false, `swapouts_delta` 0, файлы `evidence/` из дерева выносить не пришлось. Образ контейнера на стенде сравнивается по метке `com.docker.compose.image`: `.Image` у контейнеров с одной меткой может расходиться и не годится для сравнения (`docker.md`); у реплик, relay, worker и уборщика метка одна.
19. **Замечание W1 проверки: `_prepared` держал исходник на время перевода и масштаба.** У серого с альфой и RGB с tRNS на 40 Мпкс и исходник, и RGBA, и промежуточный буфер `resize` — по 160 МиБ: сумма с базой больше 450 МиБ, `MemoryError`, код 4, `failed` `invalid_image` `limit_memory`: ошибка постоянная, replay не поможет, а контракт такие файлы разрешает. Проба задачи 4.2 этих типов не содержала. Теперь после `convert("RGBA")` исходник закрывается: контекст `with Image.open` это переносит (пробы: выход из него без ошибки во всех типах, код 0), дальше `image` не читается, а ветка RGBA без перевода исходник не закрывает. Остальные ветки не тронуты, они укладываются: палитра без tRNS 242 МиБ, 1 бит 113, серый 16 бит 404–405. Проверены и чересстрочные (RGBA, серый с альфой — 357, серый 16 бит — 404) и вытянутые (40000 × 1000, 1000 × 40000, 4000000 × 10 — 328–329, серый 16 бит 405). Красный до правки: `test_pixel_limit_png_modes` — 3 упали (`gray-alpha-8`, `rgb-8-trns`, `rgb-16-trns`: `failed`, `invalid_image`), 2 прошли.
20. **Замечание W2 проверки: fencing без живой второй попытки не проверялся.** `test_hung_worker_lease_fencing` теперь размораживает первую попытку, пока вторая в `processing`: обе на worker со сроками больше времени теста (`run-worker`, новый `run-worker-second`), S3 заморожен, пока вторая не взята и сама не заморожена: она ждёт S3 и не успевает к фиксации, транзакции у неё нет (`attachment-free`). Первая завершается `superseded`, задание и вложение не меняются, после разморозки второй итог даёт только она. Прежний поток — сценарий «Зависший worker» — `test_hung_worker_thawed_after_ready`. Дефекта приложения тест не показал: условие в `_own_attempt` работает.
21. **Правки по проверке на рабочем дереве:** полный `make failure_checks` при остановленном рабочем стенде — 141 из 141, pytest 2266 с, PostgreSQL без признаков аварии; полный прогон на commit — задача 16.10. `driver.py worker-process` на рабочем дереве: `docker stop` на двух дорогих JPEG — 8,15 с, при замороженных PostgreSQL и брокере — 9,19 с, код 0, все четыре задания дошли до `failed`, `limit_cpu`. `relay-process`: при замороженном брокере — 1,71 с, код 0.
21. **Правки по проверке на рабочем дереве:** полный `make failure_checks` при остановленном рабочем стенде — 141 из 141, pytest 2266 с, PostgreSQL без признаков аварии; на `399da05` — 141 из 141, pytest 2302 с (задача 16.10). `driver.py worker-process` на `399da05`: `docker stop` на двух дорогих JPEG — 8,15 с, при замороженных PostgreSQL и брокере — 9,18 с, код 0, все четыре задания дошли до `failed`, `limit_cpu`. `relay-process`: при замороженном брокере — 1,81 с, код 0.
@@ -338,6 +338,6 @@ HEAD до правок — `6bd6053`, код снят на `e2a6427`. Этап 1
### Этап 2 (после commit правок)
- [ ] 16.8 `evidence/worker/memory.md`: `VmHWM`, `render_peak`, `memory.peak` — PNG 10 MiB и граничные 40 Мпкс, в том числе два серых 16 бит разом; OOM.
- [ ] 16.9 `evidence/worker/process.md`, `evidence/relay/process.md`, `evidence/attachments/defense-faults.md` с кодом выхода в шапке.
- [ ] 16.10 `evidence/tests/failure-checks.md` — полный прогон на этом commit; `REPORT.md` — commit измеренного состояния и бюджет.
- [x] 16.8 `evidence/worker/memory.md`: `VmHWM`, `render_peak`, `memory.peak` — PNG 10 MiB и граничные 40 Мпкс, в том числе два серых 16 бит разом; OOM.
- [x] 16.9 `evidence/worker/process.md`, `evidence/relay/process.md`, `evidence/attachments/defense-faults.md` с кодом выхода в шапке.
- [x] 16.10 `evidence/tests/failure-checks.md` — полный прогон на этом commit; `REPORT.md` — commit измеренного состояния и бюджет.