Исправить в отчёте время вывода реплики из ротации по снятым доказательствам

This commit is contained in:
2026-11-05 10:38:18 +03:00
parent d0f06568b6
commit 8e8e567fef
+1 -1
View File
@@ -82,7 +82,7 @@ HAProxy (`infra/haproxy/haproxy.cfg`):
| LB → API | `timeout connect 1s`, `timeout server 7s` (> 5 с: медленный запрос заканчивается 503 самого API с причиной в логе; 504 LB — только для зависшей реплики) | haproxy.cfg |
| PostgreSQL | пул 10 на реплику, `statement_timeout` 5 с, `idle_in_transaction_session_timeout` 10 с, connect и DNS 1 с | internal/platform/postgres |
Drain-задержка (2 с) больше расчётного времени обнаружения LB (1,5 с), поэтому LB выводит реплику из ротации раньше, чем она закрывает порт. Измерено (evidence/failover/stop-*): от SIGTERM до DOWN в HAProxy — 0,67 и 1,38 с. При SIGKILL реплика исчезает из DNS Docker и LB переводит слот в MAINT по резолверу — 0,67 и 0,69 с после выхода процесса; запросы, попавшие на мёртвый адрес в этом окне, LB повторяет на другой реплике (ошибка соединения).
Drain-задержка (2 с) больше расчётного времени обнаружения LB (1,5 с), поэтому LB выводит реплику из ротации раньше, чем она закрывает порт. Измерено (evidence/failover/stop-*): от SIGTERM до DOWN в HAProxy — 1,43 и 0,96 с. При SIGKILL реплика исчезает из DNS Docker и LB переводит слот в MAINT по резолверу — 0,77 и 0,91 с после выхода процесса; запросы, попавшие на мёртвый адрес в этом окне, LB повторяет на другой реплике (ошибка соединения).
Так же устроено в продакшене: в Kubernetes под при удалении сначала исключается из Endpoints, а `preStop`-задержка держит процесс живым, пока это доходит до балансировщиков; AWS ELB/ALB использует deregistration delay. Общий принцип — задержка дренажа больше времени, за которое балансировщик узнаёт об остановке.