perf: disable database pool overflow for H4 trial
This commit is contained in:
@@ -9,12 +9,13 @@ API за HAProxy, PostgreSQL — источник истины (данные, с
|
||||
оценка **«5»**: уровни 3 и 4 из `README.md` и трек 1 уровня 5 «Цена
|
||||
масштабирования».
|
||||
|
||||
**Состояние (15 октября 2026).** Уровни 3 и 4 реализованы и проверены,
|
||||
включая отказ обеих реплик (`stop`, `kill`, `pause`) и замену под
|
||||
нагрузкой. Доказательства — `evidence/failover/baseline/` и
|
||||
`evidence/rollout/baseline/`, отчёт — `REPORT.md`. Самопроверки стенда
|
||||
прошли. **Следующая работа — серии трека 1 и улучшение по
|
||||
`bench/RUNBOOK.md`**; в `REPORT.md` их места помечены `TODO (Codex)`.
|
||||
**Состояние (15 октября 2026).** Уровни 3 и 4 проверены, включая отказ
|
||||
обеих реплик и замену под нагрузкой: `evidence/failover/baseline/` и
|
||||
`evidence/rollout/baseline/`. Сняты серии `scaling-a`, `scaling-b`,
|
||||
`scaling-db`, `scaling-ab-before` и `scaling-ab-aa`.
|
||||
**Проверяется кандидат H4:** переполнение пула в `src/config.py`
|
||||
изменено с 5 на 0. Далее — проверки, `scaling-ab-after`, сравнение и
|
||||
финальные выводы `REPORT.md` по `bench/RUNBOOK.md`.
|
||||
Гипотезы трека 1 записаны в `REPORT.md` до замеров.
|
||||
|
||||
Указание пользователя от 15 октября 2026: выполнять замеры и при
|
||||
|
||||
@@ -154,8 +154,10 @@ Compose + HAProxy — один `make up` и один хост.
|
||||
| valkey | 0,5 | 128 МиБ | `127.0.0.1:VALKEY_HOST_PORT` (для `make run`) | свой |
|
||||
| migrate | 0,5 | 256 МиБ | нет | пароль PostgreSQL |
|
||||
|
||||
Соединения PostgreSQL: 2 × (пул 10 + переполнение 5) + migrate = 31 ≤
|
||||
`max_connections` 100; при замене на пике три реплики — 46. Реплики,
|
||||
Кандидат H4 в текущем коде: пул 10 без переполнения. Соединения
|
||||
PostgreSQL: 2 × 10 + migrate = 21 ≤ `max_connections` 100; при замене
|
||||
на пике три реплики — 31. В исходной версии экспериментов пул 10 + 5
|
||||
давал соответственно 31 и 46 соединений. Реплики,
|
||||
`migrate` и LB: read-only файловая система, `cap_drop: ALL`,
|
||||
`no-new-privileges`. Проверено: [стенд и лимиты](evidence/replicas/stand.txt).
|
||||
|
||||
|
||||
+2
-2
@@ -65,8 +65,8 @@ services:
|
||||
resources:
|
||||
limits:
|
||||
# соединения: API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW) +
|
||||
# migrate ≤ max_connections (100): 2 × 15 + 1 = 31, при
|
||||
# поочерёдной замене 3 × 15 + 1 = 46 (REPORT.md, «Лимиты и пулы»)
|
||||
# migrate ≤ max_connections (100): 2 × 10 + 1 = 21, при
|
||||
# поочерёдной замене 3 × 10 + 1 = 31 (REPORT.md, «Лимиты и пулы»)
|
||||
cpus: "2.0"
|
||||
memory: 1G
|
||||
|
||||
|
||||
+2
-2
@@ -66,8 +66,8 @@ skeleton, не менять. Требования рубрики (`README.md`)
|
||||
1 / 256 МиБ, migrate 0,5 / 256 МиБ. Override стендов (`bench/`) задаёт
|
||||
лимиты в той же форме: `cpus`/`mem_limit` рядом compose не принимает.
|
||||
- Соединения PostgreSQL: `API_REPLICAS × (DB_POOL_SIZE + DB_POOL_OVERFLOW)
|
||||
+ migrate ≤ max_connections` (100): 2 × 15 + 1 = 31, на пике замены
|
||||
3 × 15 + 1 = 46. Больше реплик или больше пул — пересчитать.
|
||||
+ migrate ≤ max_connections` (100): 2 × 10 + 1 = 21, на пике замены
|
||||
3 × 10 + 1 = 31. Больше реплик или больше пул — пересчитать.
|
||||
- Ужесточение (`x-hardened`) у `api`, `migrate`, `haproxy`: `read_only`,
|
||||
`cap_drop: ALL`, `no-new-privileges`; у `api` ещё `tmpfs: /tmp`.
|
||||
`stop_grace_period: 10s` у `api` (uvicorn завершается за
|
||||
|
||||
+1
-1
@@ -150,7 +150,7 @@ storage/ (Storage Protocol → CachedStorage → PostgresStorage)
|
||||
| `IDEMPOTENCY_TTL_SECONDS` | `86400` | сколько повтор с тем же `Idempotency-Key` отдаёт прежний результат (контракт: ≥ 24 ч); в тесте срока — 2 |
|
||||
| `KDF_CONCURRENCY` | `4` | одновременных хэшей Argon2id (64 MiB на каждый) |
|
||||
| `DB_HOST` / `DB_PORT` / `DB_NAME` / `DB_USER` / `DB_PASSWORD` | `127.0.0.1` / `5432` / `messenger` / `messenger` / пусто | подключение к PostgreSQL |
|
||||
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `10` / `5` / `5` с | пул на процесс и ожидание соединения |
|
||||
| `DB_POOL_SIZE` / `DB_POOL_OVERFLOW` / `DB_POOL_TIMEOUT` | `10` / `0` / `5` с | постоянный пул на процесс без переполнения и ожидание соединения |
|
||||
| `DB_CONNECT_TIMEOUT` / `DB_STATEMENT_TIMEOUT_MS` / `DB_OPERATION_TIMEOUT` | `3` с / `5000` / `6` с | подключение, серверный срок запроса, срок операции хранилища целиком |
|
||||
| `CACHE_HOST` / `CACHE_PORT` / `CACHE_PASSWORD` | `127.0.0.1` / `6379` / пусто | подключение к Valkey |
|
||||
| `CACHE_TIMEOUT` / `CACHE_RETRY_AFTER` / `CACHE_CHAT_TTL` / `CACHE_MAX_CONNECTIONS` | `0.2` с / `5` с / `3600` с / `10` | срок команды, окно пропуска после отказа, срок карточки, пул |
|
||||
|
||||
+3
-2
@@ -105,9 +105,10 @@ class Database:
|
||||
name: str = "messenger"
|
||||
user: str = "messenger"
|
||||
password: str = field(default="", repr=False)
|
||||
# соединений в пуле и сверх него: пул считается на один процесс
|
||||
# постоянный пул на процесс: под перегрузкой ждём свободное соединение
|
||||
# вместо создания и закрытия соединений переполнения
|
||||
pool_size: int = 10
|
||||
pool_overflow: int = 5
|
||||
pool_overflow: int = 0
|
||||
# секунды ожидания свободного соединения пула
|
||||
pool_timeout: float = 5.0
|
||||
# секунды на установку соединения
|
||||
|
||||
Reference in New Issue
Block a user