perf: bound database concurrency for preregistered H6 trial

This commit is contained in:
2026-10-16 01:11:42 +03:00
parent 08e345fd14
commit ca8223dba9
7 changed files with 75 additions and 16 deletions
+7 -5
View File
@@ -15,8 +15,11 @@ API за HAProxy, PostgreSQL — источник истины (данные, с
`scaling-db`, `scaling-ab-before`, `scaling-ab-aa`, `scaling-ab-after`.
**H4 опровергнута:** R* основного случая 788 → 788/с; сравнение и графики
в `evidence/compare/` и `evidence/plots/scaling-ab/`. Переполнение пула
возвращено с 0 на 5. Для оценки «5» ещё нужно подтверждённое улучшение,
затем финальные проверки и чистая копия по `bench/RUNBOOK.md`.
возвращено с 0 на 5. Контроли H5 сняты; шум 24.9 % превысил её допуск.
До измерения кандидата записан строгий план H6: пул 2 + 0,
рост медианы ≥ 50 % и все повторы выше обоих контролей. Кандидат H6
применён, далее проверки и `scaling-h6-after`. Для «5» ещё нужно
подтверждённое улучшение и финальная проверка чистой копии.
Гипотезы трека 1 записаны в `REPORT.md` до замеров.
Указание пользователя от 15 октября 2026: выполнять замеры и при
@@ -62,9 +65,8 @@ Codex сам загружает `AGENTS.md` от корня репозитори
проверка — `codex execpolicy check --pretty --rules
.codex/rules/messenger.rules -- <команда>`. Правила дублируют раздел 2,
но не заменяют его;
- **навыки** `.agents/skills/*/SKILL.md`: `lab3-bench` — замеры по
`bench/RUNBOOK.md`, `messenger-stand` — работа со стендом. Codex
выбирает их по описанию или по `$имя`.
- **навыки проекта**: `.agents/skills/` и `.codex/skills/` отсутствуют
при проверке 16 октября. Методика читается прямо из `bench/RUNBOOK.md`.
Конфликт: более глубокий файл уточняет корневой, но не отменяет
раздел 2. Прямая просьба пользователя в чате важнее этих файлов, кроме
+9 -3
View File
@@ -155,9 +155,11 @@ Compose + HAProxy — один `make up` и один хост.
| valkey | 0,5 | 128 МиБ | `127.0.0.1:VALKEY_HOST_PORT` (для `make run`) | свой |
| migrate | 0,5 | 256 МиБ | нет | пароль PostgreSQL |
Соединения PostgreSQL: 2 × (пул 10 + переполнение 5) + migrate = 31 ≤
`max_connections` 100; при замене на пике три реплики — 46. Кандидат H4
без переполнения возвращён к исходной настройке после отсутствия эффекта.
Кандидат H6: пул 2 без переполнения. Соединения PostgreSQL:
2 × 2 + migrate = 5 ≤ `max_connections` 100; при замене на пике три
реплики — 7. В исходных сериях пул 10 + 5 давал 31 и 46 соответственно.
Кандидат H4 с пулом 10 + 0 возвращён после отсутствия эффекта;
теперь отдельно проверяется пул 2 + 0.
Реплики,
`migrate` и LB: read-only файловая система, `cap_drop: ALL`,
`no-new-privileges`. Проверено: [стенд и лимиты](evidence/replicas/stand.txt).
@@ -573,6 +575,10 @@ R*(2 × 1) ≈ 830/с; на первой нарушившей ступени —
ожидание и возможные 503; механизм конкуренции ещё не доказан.
- Итог: кандидат ещё не измерен.
Проверки кандидата H6 до замера: [84 теста приложения и 15 отказов](evidence/tests/h6-candidate.txt),
smoke, failover и persistence — успешны. Хеш приложения
`43893cc08aa40b09`; профиль, зависимости и таймауты не менялись.
**Результаты исходных серий (Apple M4):** по три повтора каждой
конфигурации. Полная [сводка и точка насыщения](evidence/plots/scaling/summary.md);
исходные ступени, ресурсы и паспорта — в каталогах
+2 -2
View File
@@ -65,8 +65,8 @@ services:
resources:
limits:
# соединения: API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW) +
# migrate ≤ max_connections (100): 2 × 15 + 1 = 31, при
# поочерёдной замене 3 × 15 + 1 = 46 (REPORT.md, «Лимиты и пулы»)
# migrate ≤ max_connections (100): 2 × 2 + 1 = 5, при
# поочерёдной замене 3 × 2 + 1 = 7 (REPORT.md, «Лимиты и пулы»)
cpus: "2.0"
memory: 1G
+50
View File
@@ -0,0 +1,50 @@
# Что доказывает: кандидат H6 с пулом 2 + 0 проходит проверки до замера.
# Дата UTC: 2026-10-15 (16 октября по Europe/Moscow).
# Окружение: Apple M4, macOS 26.6.2; Docker 28.0.4,
# Compose 2.34.0-desktop.1; pytest на Python 3.13.7.
# Код: src_sha256 43893cc08aa40b09dd86ac7ff69f3420179180c04ad375a3130966917c18c6c7.
# Git: правки кандидата поверх 08e345f, до локального коммита кандидата.
# Стенды: отдельные isolated (LB, две реплики) и failures; штатная уборка.
# Вывод сокращён (...); полные журналы текущего запуска:
# /tmp/lab3-h6-isolated.log, /tmp/lab3-h6-failure.log.
$ make fmt
uv run ruff format .
97 files left unchanged
uv run ruff check --fix .
All checks passed!
$ make lint
uv run ruff format --check .
97 files already formatted
uv run ruff check .
All checks passed!
$ make check
python3 scripts/check_contract.py
PASS: offline skeleton structure, local refs and Python syntax; application NOT tested.
$ make requirements-check
uv export --frozen --no-dev --no-emit-project --no-header --format requirements.txt | diff -u requirements.txt - && echo "requirements.txt matches uv.lock"
requirements.txt matches uv.lock
$ make test-isolated
python3 student-tests/stand.py isolated
...
PASS: lab3 public API scenario; infrastructure and grading evidence remain separate.
...
====================== 84 passed, 15 deselected in 10.89s ======================
...
{"observed_instances_before": 2, "successful_writes": 116, "failed_attempts": 0, "first_recovery_seconds": 1.493}
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
...
PASS: persistence preserved confirmed data and existing session. Hook scope needs operator evidence.
[isolated] cleanup
[isolated] results: {'test': 0, 'student-test': 0, 'test-failover': 0, 'test-persistence': 0}
$ make failure-checks
python3 student-tests/stand.py failures
...
====================== 15 passed, 84 deselected in 42.40s ======================
[failures] cleanup
[failures] results: {'fault': 0}
+2 -2
View File
@@ -66,8 +66,8 @@ skeleton, не менять. Требования рубрики (`README.md`)
1 / 256 МиБ, migrate 0,5 / 256 МиБ. Override стендов (`bench/`) задаёт
лимиты в той же форме: `cpus`/`mem_limit` рядом compose не принимает.
- Соединения PostgreSQL: `API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW)
+ migrate ≤ max_connections` (100): 2 × 15 + 1 = 31, на пике замены
3 × 15 + 1 = 46. Больше реплик или больше пул — пересчитать.
+ migrate ≤ max_connections` (100): 2 × 2 + 1 = 5, на пике замены
3 × 2 + 1 = 7. Больше реплик или больше пул — пересчитать.
- Ужесточение (`x-hardened`) у `api`, `migrate`, `haproxy`: `read_only`,
`cap_drop: ALL`, `no-new-privileges`; у `api` ещё `tmpfs: /tmp`.
`stop_grace_period: 10s` у `api` (uvicorn завершается за
+1 -1
View File
@@ -150,7 +150,7 @@ storage/ (Storage Protocol → CachedStorage → PostgresStorage)
| `IDEMPOTENCY_TTL_SECONDS` | `86400` | сколько повтор с тем же `Idempotency-Key` отдаёт прежний результат (контракт: ≥ 24 ч); в тесте срока — 2 |
| `KDF_CONCURRENCY` | `4` | одновременных хэшей Argon2id (64 MiB на каждый) |
| `DB_HOST` / `DB_PORT` / `DB_NAME` / `DB_USER` / `DB_PASSWORD` | `127.0.0.1` / `5432` / `messenger` / `messenger` / пусто | подключение к PostgreSQL |
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `10` / `5` / `5` с | пул на процесс и ожидание соединения |
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `2` / `0` / `5` с | ограниченный пул на процесс без переполнения и ожидание соединения |
| `DB_CONNECT_TIMEOUT` / `DB_STATEMENT_TIMEOUT_MS` / `DB_OPERATION_TIMEOUT` | `3` с / `5000` / `6` с | подключение, серверный срок запроса, срок операции хранилища целиком |
| `CACHE_HOST` / `CACHE_PORT` / `CACHE_PASSWORD` | `127.0.0.1` / `6379` / пусто | подключение к Valkey |
| `CACHE_TIMEOUT` / `CACHE_RETRY_AFTER` / `CACHE_CHAT_TTL` / `CACHE_MAX_CONNECTIONS` | `0.2` с / `5` с / `3600` с / `10` | срок команды, окно пропуска после отказа, срок карточки, пул |
+4 -3
View File
@@ -105,9 +105,10 @@ class Database:
name: str = "messenger"
user: str = "messenger"
password: str = field(default="", repr=False)
# соединений в пуле и сверх него: пул считается на один процесс
pool_size: int = 10
pool_overflow: int = 5
# ограничиваем конкурентную работу с БД; избыток запросов ждёт пул
# лимит считается на один процесс, переполнение отключено
pool_size: int = 2
pool_overflow: int = 0
# секунды ожидания свободного соединения пула
pool_timeout: float = 5.0
# секунды на установку соединения