perf: disable database pool overflow for H4 trial

This commit is contained in:
2026-10-15 19:45:04 +03:00
parent 499e8c799d
commit d9868ca1b9
6 changed files with 19 additions and 15 deletions
+7 -6
View File
@@ -9,12 +9,13 @@ API за HAProxy, PostgreSQL — источник истины (данные, с
оценка **«5»**: уровни 3 и 4 из `README.md` и трек 1 уровня 5 «Цена
масштабирования».
**Состояние (15 октября 2026).** Уровни 3 и 4 реализованы и проверены,
включая отказ обеих реплик (`stop`, `kill`, `pause`) и замену под
нагрузкой. Доказательства — `evidence/failover/baseline/` и
`evidence/rollout/baseline/`, отчёт — `REPORT.md`. Самопроверки стенда
прошли. **Следующая работа — серии трека 1 и улучшение по
`bench/RUNBOOK.md`**; в `REPORT.md` их места помечены `TODO (Codex)`.
**Состояние (15 октября 2026).** Уровни 3 и 4 проверены, включая отказ
обеих реплик и замену под нагрузкой: `evidence/failover/baseline/` и
`evidence/rollout/baseline/`. Сняты серии `scaling-a`, `scaling-b`,
`scaling-db`, `scaling-ab-before` и `scaling-ab-aa`.
**Проверяется кандидат H4:** переполнение пула в `src/config.py`
изменено с 5 на 0. Далее — проверки, `scaling-ab-after`, сравнение и
финальные выводы `REPORT.md` по `bench/RUNBOOK.md`.
Гипотезы трека 1 записаны в `REPORT.md` до замеров.
Указание пользователя от 15 октября 2026: выполнять замеры и при
+4 -2
View File
@@ -154,8 +154,10 @@ Compose + HAProxy — один `make up` и один хост.
| valkey | 0,5 | 128 МиБ | `127.0.0.1:VALKEY_HOST_PORT` (для `make run`) | свой |
| migrate | 0,5 | 256 МиБ | нет | пароль PostgreSQL |
Соединения PostgreSQL: 2 × (пул 10 + переполнение 5) + migrate = 31 ≤
`max_connections` 100; при замене на пике три реплики — 46. Реплики,
Кандидат H4 в текущем коде: пул 10 без переполнения. Соединения
PostgreSQL: 2 × 10 + migrate = 21 ≤ `max_connections` 100; при замене
на пике три реплики — 31. В исходной версии экспериментов пул 10 + 5
давал соответственно 31 и 46 соединений. Реплики,
`migrate` и LB: read-only файловая система, `cap_drop: ALL`,
`no-new-privileges`. Проверено: [стенд и лимиты](evidence/replicas/stand.txt).
+2 -2
View File
@@ -65,8 +65,8 @@ services:
resources:
limits:
# соединения: API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW) +
# migrate ≤ max_connections (100): 2 × 15 + 1 = 31, при
# поочерёдной замене 3 × 15 + 1 = 46 (REPORT.md, «Лимиты и пулы»)
# migrate ≤ max_connections (100): 2 × 10 + 1 = 21, при
# поочерёдной замене 3 × 10 + 1 = 31 (REPORT.md, «Лимиты и пулы»)
cpus: "2.0"
memory: 1G
+2 -2
View File
@@ -66,8 +66,8 @@ skeleton, не менять. Требования рубрики (`README.md`)
1 / 256 МиБ, migrate 0,5 / 256 МиБ. Override стендов (`bench/`) задаёт
лимиты в той же форме: `cpus`/`mem_limit` рядом compose не принимает.
- Соединения PostgreSQL: `API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW)
+ migrate ≤ max_connections` (100): 2 × 15 + 1 = 31, на пике замены
3 × 15 + 1 = 46. Больше реплик или больше пул — пересчитать.
+ migrate ≤ max_connections` (100): 2 × 10 + 1 = 21, на пике замены
3 × 10 + 1 = 31. Больше реплик или больше пул — пересчитать.
- Ужесточение (`x-hardened`) у `api`, `migrate`, `haproxy`: `read_only`,
`cap_drop: ALL`, `no-new-privileges`; у `api` ещё `tmpfs: /tmp`.
`stop_grace_period: 10s` у `api` (uvicorn завершается за
+1 -1
View File
@@ -150,7 +150,7 @@ storage/ (Storage Protocol → CachedStorage → PostgresStorage)
| `IDEMPOTENCY_TTL_SECONDS` | `86400` | сколько повтор с тем же `Idempotency-Key` отдаёт прежний результат (контракт: ≥ 24 ч); в тесте срока — 2 |
| `KDF_CONCURRENCY` | `4` | одновременных хэшей Argon2id (64 MiB на каждый) |
| `DB_HOST` / `DB_PORT` / `DB_NAME` / `DB_USER` / `DB_PASSWORD` | `127.0.0.1` / `5432` / `messenger` / `messenger` / пусто | подключение к PostgreSQL |
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `10` / `5` / `5` с | пул на процесс и ожидание соединения |
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `10` / `0` / `5` с | постоянный пул на процесс без переполнения и ожидание соединения |
| `DB_CONNECT_TIMEOUT` / `DB_STATEMENT_TIMEOUT_MS` / `DB_OPERATION_TIMEOUT` | `3` с / `5000` / `6` с | подключение, серверный срок запроса, срок операции хранилища целиком |
| `CACHE_HOST` / `CACHE_PORT` / `CACHE_PASSWORD` | `127.0.0.1` / `6379` / пусто | подключение к Valkey |
| `CACHE_TIMEOUT` / `CACHE_RETRY_AFTER` / `CACHE_CHAT_TTL` / `CACHE_MAX_CONNECTIONS` | `0.2` с / `5` с / `3600` с / `10` | срок команды, окно пропуска после отказа, срок карточки, пул |
+3 -2
View File
@@ -105,9 +105,10 @@ class Database:
name: str = "messenger"
user: str = "messenger"
password: str = field(default="", repr=False)
# соединений в пуле и сверх него: пул считается на один процесс
# постоянный пул на процесс: под перегрузкой ждём свободное соединение
# вместо создания и закрытия соединений переполнения
pool_size: int = 10
pool_overflow: int = 5
pool_overflow: int = 0
# секунды ожидания свободного соединения пула
pool_timeout: float = 5.0
# секунды на установку соединения