Files
mtusi2026lab3/evidence/tests/bench-restore-quick.md
T
ricoromaandClaude Opus 5.5 c5840bfaa8 docs: add idempotency and X-Instance-Id evidence to the report
- evidence for replay, conflict, replay through a new API process and
  after restarting API and storages, keys table, key race,
  X-Instance-Id in responses and logs, explicit and invalid
  instance_id and key TTL, test runs
- stand evidence: make wipe_data leaves the lab 2 volume intact, build
  from a fresh git clone passes smoke, bench restore stage sends with
  Idempotency-Key
- REPORT.md: X-Instance-Id, idempotency design, IDEMPOTENCY_TTL_SECONDS
  mapping, limitations and evidence rows
- tasks.md: mark the change tasks done, add follow-ups from verify

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-10-10 17:08:47 +03:00

66 lines
4.7 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Этап восстановления стенда `bench/` с `Idempotency-Key`
| | |
|---|---|
| Спеки | `load-benchmark` «Сценарии нагрузки» — «Запись с ключом» (этап восстановления: `after_backup.js`, `restore_check.js`) |
| Change | `instance-id-idempotency`, задача 6.2, доработка по `/opsx:verify` |
| Дата | 2026-10-10 14:03:46–14:06:16 UTC |
| Commit | `af4bca0` (в паспорте `dirty: true`: не закоммичены только evidence и `REPORT.md`, код — `af4bca0`) |
| Стенд | `make bench_restore_quick`: проект compose `mtusi-bench`, профиль `restore_quick` (1k / 5k / 10k), метка `quick-restore-20261010T140346Z` |
| Хост | Docker Desktop 29.8.1, macOS arm64; ВМ Docker: 12 CPU, 7,7 GiB RAM; от батареи, swap 1042 MiB; рядом работал стенд `mtusi-lab3` |
Это самопроверка стенда, а не замер: каталог `quick-*` в git не идёт
(`.claude/rules/bench.md`, «Результаты»), времена из него в отчёт не
переносятся. Здесь проверено одно: отправки этапа восстановления идут с
ключом и все подтверждаются.
Перед прогоном удалены остатки прерванного прогона 2026-10-08
(контейнеры `mtusi-bench-*`, volumes `mtusi-bench_postgres_data` и
`mtusi-bench_restore`, сеть `mtusi-bench`): с ними `run.py`
отказывается стартовать.
## Вывод прогона
```text
$ make bench_restore_quick
...
[00:02:19] size 10k: backup 1.7 MiB in 0.22s during 1000 writes (0 failed)
[00:02:27] size 10k: restored 13554 of 14501 messages (947 lost after the snapshot), restore 0.13s, ANALYZE 0.13s, API 2.16s, RTO 3.34s; stale chat GET 200 POST 500, after FLUSHALL 404
[00:02:29] complete: 0/0 runs, results in evidence/bench/quick-restore-20261010T140346Z
exit=0
```
Из `summary.md` метки, раздел «Backup и восстановление» (столбцы
времени опущены):
| Размер | До backup | Исходная в конце | Восстановлено | Потеряно | Записей во время backup (в backup) | Чат после backup: GET / POST до FLUSHALL, GET после | Сессия после backup |
|---|---|---|---|---|---|---|---|
| 1k | 4500 | 5501 | 4564 | 937 | 1000 (64) | 200 / 500, 404 | 401 |
| 5k | 8500 | 9501 | 8585 | 916 | 1000 (85) | 200 / 500, 404 | 401 |
| 10k | 13500 | 14501 | 13554 | 947 | 1000 (54) | 200 / 500, 404 | 401 |
## Что это показывает
- **Запись во время backup** (`write.js`, `sendMessage` из `lib.js` с
`messageHeaders`): 1000 отправок на каждом размере, 0 неудачных. Затем
`after_backup.js` (тоже `messageHeaders`) отправил одно сообщение
активности «после backup». Исходная база в конце = до backup + 1000 +
1 (4500 + 1000 + 1 = 5501): каждая отправка с новым ключом дала ровно
одно сообщение. Без ключа все они получили бы 400.
- **Запись в устаревший чат** (`restore_check.js`, фаза `stale`): чата
нет в восстановленной базе, а его карточка ещё в кэше. Запрос с
ключом прошёл проверку ключа и членства по кэшу и получил 500 на
записи в базу, где чата нет, — как в лабе 2 (`mtusi2026lab2-safronov`,
метки `quick-restore-20261002T*`: тоже `200 / 500, 404`). Без ключа
был бы 400 раньше проверки членства, и фаза проверяла бы не то. После
`FLUSHALL` — 404.
- Сверка обеих баз (число строк, md5 сообщений, индексы, ревизия схемы
`alembic_version`) прошла на каждом размере, иначе команда завершилась
бы ошибкой. Head миграций образа `af4bca0` — `7652184b7016`, с таблицей
`idempotency_keys`.
Попутно: backup в пересчёте на сообщение вырос с ~40 до ~135 байт
(лаба 2 — 36,9–40,9, здесь 131,9–137,5). Это строки
`idempotency_keys`, по одной на сообщение. Это наблюдение самопроверки
на батарее, а не замер; цену ключа измеряет трек 1 (`PLAN.md`).