From 4be2316bf8d36c3c6c7f76511cb48c0e063ab89a Mon Sep 17 00:00:00 2001 From: roman Date: Fri, 2 Oct 2026 05:18:06 +0300 Subject: [PATCH] docs: record track 2 backup and restore hypotheses Co-Authored-By: Claude Opus 5.5 --- REPORT.md | 54 ++++++++++++++++++++++++++++++++++++++++++++++++++++++ 1 file changed, 54 insertions(+) diff --git a/REPORT.md b/REPORT.md index 6f543c81..66f4a511 100644 --- a/REPORT.md +++ b/REPORT.md @@ -804,6 +804,60 @@ HTTP-матрица (`summary.md`, сценарии `read` и `write`): состоянии стенда, а буферы детерминированы. Шум между прогонами влияет только на время. +### Трек 2, часть 2: backup, восстановление в новое хранилище и сверка + +Зачем: вторая половина трека «5» №2 — backup → восстановление в новое +хранилище → сверка количества и выбранных сообщений, время +восстановления и границы потери данных. Команда — `make bench_restore` +(метка `restore`), самопроверка и сценарий защиты — `make +bench_restore_quick` (~1,5 мин). Методика — design change +`track2-backup-restore`. + +**Данные и стенд** — как в части 1: 110 000 / 200 000 / 600 000 +сообщений в 1 111 чатах, те же образы и лимиты. Матрицы прогонов нет. + +**Процедура на каждом размере:** +1. Запоминаются `id` и поля всех сообщений и число строк каждой + таблицы. +2. Через HTTP идёт запись 5 000 сообщений, 10 клиентов. Когда число + сообщений начало расти, снимается `pg_dump -Fc`: логический backup, + один снимок на старте. +3. После backup через HTTP: новый пользователь входит (новая сессия), + создаёт чат с читателем и пишет в него сообщение. Карточка чата + попадает в Valkey. +4. Новое хранилище: контейнер PostgreSQL того же образа и с теми же + лимитами на новом volume, `pg_restore -j 4`, затем `ANALYZE`. +5. Сверка баз: + - число строк `users`, `chats`, `chat_members`, `sessions`; + - md5 всех полей каждого восстановленного сообщения против + исходного; + - все сообщения, бывшие до backup, восстановлены; + - потерянные — только из чата записи и чата «после backup»; + - индексы и ревизия схемы совпадают. +6. API переключается на восстановленную базу. Через HTTP: + - 30 страниц истории разных чатов совпадают с исходными + поэлементно; + - прежняя сессия действует; + - сессия «после backup» — 401; + - ответы на чат «после backup» записываются. +7. `FLUSHALL` Valkey. Чат «после backup» — 404, страницы те же. + +Любое расхождение в шагах 5–7 — ошибка команды. RTO — время от запуска +нового хранилища до готовности API, без сверки. + +**Гипотезы.** Записаны 2026-10-02 до `make bench_restore`, на commit +`8bc4272`. Основа — проба (600 000 строк: dump 0,95 с, `pg_restore -j +4` 1,15 с) и `make bench_restore_quick`: 4 500–14 500 сообщений, backup +37–41 байт на сообщение, RTO около 3 с, из них 2 с — пересоздание API. + +| | Гипотеза | Опровергнута, если | +| --- | --- | --- | +| R1 | Логический backup не мешает записи: нагрузка во время `pg_dump` проходит без ошибок | хоть один запрос нагрузки неуспешен | +| R2 | Всё, что закоммичено до начала backup, восстанавливается без изменений; теряются только сообщения, закоммиченные после снимка, и активность после backup | сверка шага 5 или страницы шага 6 расходятся (команда завершилась бы ошибкой) | +| R3 | Время восстановления базы растёт не быстрее данных, а RTO на 600 000 сообщений меньше 30 с | RTO на 500k ≥ 30 с, или время БД (хранилище + копия + `pg_restore` + `ANALYZE`) на 600 000 больше чем в 10 раз выше, чем на 110 000 (данных ×5,5) | +| R4 | Backup в формате custom (сжатый, без индексов) — меньше трети от байт в БД на сообщение (~300 в части 1) | больше 100 байт на сообщение | +| R5 | Без `FLUSHALL` чат, созданный после backup, отдаётся из кэша (200), а запись в него — 500; после `FLUSHALL` — 404 | до `FLUSHALL` не 200 (вред не показан) или после — не 404 | + ## Ограничения и следующие шаги - Сервер, замёрзший при открытом соединении, держит запрос 8 с, а не