Prepare lab 5 grade 4 recovery verification

This commit is contained in:
Artyom
2026-11-06 09:28:01 +03:00
parent 47ffb2d10b
commit b159899d73
5 changed files with 46 additions and 0 deletions
@@ -0,0 +1,3 @@
schema: spec-driven
created: 2026-11-06
skip_specs: true
@@ -0,0 +1,19 @@
## Context
Уровень 3 подтверждён в 47ffb2d. Вложения, задания, outbox и эффекты используют SQLAlchemy2 async; Alembic head 0006. PostgreSQL хранит состояния, S3 — объекты, RabbitMQ — транспорт.
## Goals / Non-Goals
Проверить crop/optimized, лимиты, COMMIT→publish, S3→COMMIT→ack, retry/DLQ/replay, fencing и staging cleanup. Не менять готовую реализацию без доказанного major и не исправлять minor limits.py.
## Decisions
- Тот же project mtusi2026lab5 и volumes, API 18085, stats/UI 25085/25086. Только последовательные проверки.
- Suite использует fault overlay с lease=5 s, backoff base=1 s, sweep=1 s; production defaults отдельно фиксируются в заметках. Это ускоряет воспроизводимость, не является замером latency production.
- У каждого crash сохранить docker compose ps -a до восстановления, exit=137 и состояние PostgreSQL. COMMIT outbox предшествует publish; подтверждённая публикация предшествует mark published. Consumer ack следует COMMIT результата.
- Реальное изображение 8000×5000 проверяется при timeout=0.5 s и memory=200 MiB, затем при штатных 30 s/448 MiB. Cgroup worker 1024 MiB; штатный prefetch/concurrency=2.
- Качество v1: JPEG 85 optimize, WebP 80 method 4; EXIF orientation до resize, alpha на белом, метаданные не передаются encoder. Thumbnail вписан без увеличения, crop 128×128, optimized вписан в 1280×1280.
## Risks / Trade-offs
Ошибки диагностики сохраняются с ненулевым exit code. DLQ имеет исходные сообщения; проверяется приращение, volumes не очищаются. Сбои исполняются только на собственном стенде. Миграции и схема не меняются.
@@ -0,0 +1,15 @@
## Why
После подтверждения уровня 3 требуется реальная квалификация четырёх критериев уровня 4 на SQLAlchemy. Старые измерения asyncpg не подтверждают текущий адаптер.
## What Changes
Запустить полный suite уровня 4 с fault injection и Linux memory/time limits. Добавить в результаты аварий фактические имена/ID остановленных контейнеров, сохранить SHA, сырые результаты и заметки для REPORT.
## Capabilities
Требования не меняются, новых возможностей нет (skip_specs=true). Проверяются существующие lab5 pipeline, outbox, retries и leases.
## Impact
Только scripts/pipeline_suite.py (evidence), evidence/sqlalchemy-2026-11-06/grade4 и OpenSpec. Итоговый REPORT, contracts, публичные tests и соседние лабы не меняются. Новое поведение versioned pipeline — следующий цикл.
@@ -0,0 +1,6 @@
## 1. Квалификация уровня 4
- [ ] 1.1 Сохранить фактическое состояние упавшего контейнера в suite; make check/lint.
- [ ] 1.2 Выполнить suite level4 на Docker с Linux time/memory limits и всеми окнами отказа.
- [ ] 1.3 Сверить каждый критерий и оформить evidence/ограничения для REPORT.
- [ ] 1.4 Закрыть задачи, архивировать завершённый цикл, коммит после make lint.
+3
View File
@@ -396,6 +396,9 @@ class Suite:
code = self.stack.wait_exit(service)
check(code == 137, f"{service} exited with {code}, expected 137 at {point}")
seen = observe(ident)
seen["containers"] = self.stack.dc(
"ps", "-a", "--format", "{{.Name}} {{.ID}} {{.State}} {{.Status}}", service
).splitlines()
self.stack.launch(service)
ready = self.api.wait(ident, timeout=self.args.recovery_timeout)
poll(lambda: all(r["published"] for r in self.stack.sql("outbox", id=ident)), 30, "outbox")