No failover run ever lost an answer, so the retry of an unconfirmed write was only covered in process. make retry-check holds the chat row with SELECT ... FOR UPDATE for 1.5 s (below lock_timeout), sends a message with a 0.5 s client timeout, finds the replica whose request waits on the lock in pg_stat_activity and then retries with the same key and text through the LB, once with that replica alive and once after docker kill. It checks the 201, a single copy with the id of the retry answer and, for the live replica, the 201 it logged without a client; created_at tells which attempt wrote the message. CI runs it. failover-each and rolling-update now record the database size and a docker stats snapshot in the background of the action, rolling-update names the tag and id of every image it replaces, and scaling.py writes started and the compose-up log marks in UTC with Z; the track README states that the recorded rows are host time (MSK) and what host-others.csv covers. Co-Authored-By: Claude Opus 5.5 (1M context) <noreply@anthropic.com> Claude-Session: https://claude.ai/code/session_01V1d3RLHNBBMA6UqBLLJv27
Трек 1 «Цена масштабирования»: сырые данные
| Файл | Что внутри | Чем получен |
|---|---|---|
host.txt |
docker stats --all всего хоста, контейнеры, версии Docker и образов перед серией A |
make track1-host |
host-others.csv |
раз в 10 с с 2026-10-28T17:32Z до 2026-10-28T22:42Z (20:32–01:42 MSK; ts — Unix-время): суммарный CPU чужих контейнеров (стенды других лаб) и самый загруженный из них. Покрывает серии A, B и сравнение, но не контрольные прогоны 30.10: для них чужая нагрузка есть только в столбце cpu_other их summary.csv |
цикл docker stats --no-stream по контейнерам не из проекта mtusi2026lab3, запущенный рядом с сериями |
aborted/series-a-1-summary.csv |
первая попытка серии A, прерванная из-за сборки образа соседней лабы: шаги с API 410 % при 1 350 rps и паузами Docker API по 15 мин | make track1-a до добавления отбраковки |
series-a/summary.csv |
серия A: 1×4, 2×2, 4×1 при 4 CPU / 2 GiB API, строка на прогон | make track1-a |
series-b/summary.csv |
серия B: 1×1, 2×1, 8×1 по 1 CPU / 512 MiB (4×1 — из серии A) | make track1-b |
compare/summary.csv |
улучшение: «до» (образ edc091d) и «после» на 8×1, чередование по повторам; третий повтор «после» снят отдельно после сбоя compose up при работе соседних тестов |
make track1-compare, затем python3 scripts/scaling.py --out evidence/track1/compare --configs 8x1 --api-memory 512 --rates 3600,5400,8100 --variant after --repeats 1 --first-repeat 3 |
control-pool/summary.csv |
контроль насыщения на итоговом коде (b1c80ee): 8×1 при 5 400 rps, пул 4/8/16 на воркер и maxconn LB 16/64 на реплику (по умолчанию 32), варианты чередуются по повторам, 3 повтора |
make track1-control |
control-cpus/summary.csv |
контроль размещения на итоговом коде (b1c80ee): 4×1 и 8×0,5 на одних и тех же CPU 7–10 при 4 560 и 6 830 rps, 3 повтора; снят повторно после отброшенной первой попытки |
вторая команда make track1-control |
aborted/control-cpus-1-summary.csv, aborted/control-cpus-1-statements.csv |
отброшенная первая попытка контроля размещения: в четырёх прогонах 4×1 команда записи в PostgreSQL шла 7–34 мс вместо 0,2–0,6 (IO: WalSync), CPU-отбраковка этого не поймала; итог и среднее время команды записи по прогонам |
make track1-control |
*/compose-up-failed.log |
полный вывод неудачной попытки compose up --wait, если она была (оркестратор повторяет через 30 с); в control-pool/ — два раза при переходе на пул 16: все реплики пересозданы разом, lb без готовых серверов стал unhealthy |
scripts/scaling.py |
*/disturbed.csv |
отбракованные прогоны (чужой CPU в VM > 1 ядра, разрыв сэмплов > 10 с или k6 дольше нагрузки на 90 с); каждый повторён после 15 с тишины | scripts/scaling.py |
<серия>/<вариант>-<RxC>_rate<N>_rep<K>/ |
сырьё прогона: k6/summary.json (итог k6 без токенов), k6/k6.txt, docker_stats.csv, vm_stat.csv (счётчики /proc/stat всей VM), lb_stats.csv (HAProxy CSV), pg_activity.csv (pg_stat_activity по state/wait_event), pg_statements.csv (топ-20 pg_stat_statements за прогон) |
scripts/scaling.py |
plots/*.png, plots/capacity.csv, plots/capacity.md |
графики и сводка потолков | make plots |
after-checks.txt |
проверки уровней «3» и «4» на коде с улучшением | команды внутри файла |
Поля summary.csv: rate — предложенная интенсивность (k6 constant-arrival-rate), ok_rps — успешные
ответы в секунду в окне замера, failed_ratio — доля неуспешных, dropped_iterations — итерации, которые k6 не
смог начать (нет свободного VU: система не успевает), p50/p95/p99_ms — по всем запросам окна,
cpu_* — средний CPU компонента в окне, % одного ядра (api — сумма реплик), cpu_vm — CPU всей VM Docker,
cpu_other — его часть вне контейнеров стенда (соседи, сборки, сеть Docker), pg_* — среднее/максимум числа
клиентских соединений PostgreSQL по состоянию раз в секунду (active, idle — свободные соединения пулов,
idle_tx — транзакция открыта и ждёт приложение, lock — ждут блокировку строки), lb_qcur_max — очередь
HAProxy к backend api, db_mb/messages — размер базы и число сообщений перед прогоном, gap_s — наибольший
разрыв между сэмплами, wall_s — длительность прогона k6, saturated — доля ошибок > 1 %, или сброшенных
итераций > 1 %, или p95 > 500 мс, disturbed — прогон отбракован, started — начало окна замера.
Время: started во всех строках, снятых в этом каталоге, и метки == … в compose-up-failed.log — местное время
хоста MSK (UTC+3) без суффикса; *.txt и action.txt в evidence/ — UTC с Z, ts в CSV сэмплеров — Unix-время.
Новые прогоны scripts/scaling.py пишут started в UTC с Z, поэтому строка без суффикса — MSK, с Z — UTC.