fix: exit at once on SIGTERM before the server starts

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
2026-10-13 16:53:15 +03:00
co-authored by Claude Opus 5.5
parent f6052f6c30
commit edad1fda2b
4 changed files with 105 additions and 18 deletions
+20 -16
View File
@@ -189,12 +189,14 @@ remove_old() {
log "$step: slot $old_slot ready"
}
# убрать новую реплику, которая не стала готовой. Есть слот — сначала
# maint: DNS мог уже отдать ей слот, и проверки вот-вот включили бы её.
# Слота нет или она не UP — запросов на ней нет, и kill безопасен; SIGTERM
# до установки обработчиков uvicorn процесс с PID 1 теряет, и docker stop
# ждал бы все 10 с (KNOWN_ISSUES.md). UP — graceful stop. Прерывание
# между up --scale и поиском новой: ID ещё не известен, ищется здесь
# убрать новую реплику, которая не стала готовой (решение 7 design change
# fix-known-issues). Есть слот (DNS уже отдал его) — maint, затем штатная
# остановка: стартующий процесс выходит сразу по раннему обработчику
# SIGTERM, работающий — дорабатывает запросы, которые LB успел отправить
# на слот до maint. Слота нет — запросов на ней не было, и kill безопасен:
# это и страховка на первые десятки миллисекунд старта интерпретатора, где
# SIGTERM ещё некому принять. Прерывание между up --scale и поиском новой:
# ID ещё не известен, ищется здесь
remove_new() {
if [ -z "$new_id" ]; then
new_id=$(find_new | tail -n 1)
@@ -209,18 +211,20 @@ remove_new() {
if [ -n "$new_addr" ]; then
new_slot=$(slot_field "$new_addr" 1)
fi
if [ -n "$new_slot" ]; then
new_status=$(slot_field "$new_addr" 4)
lb_set "$new_slot" maint || return 1
if [ "$new_status" = UP ]; then
docker stop --timeout 10 "$new_id" >/dev/null || return 1
fi
if [ -z "$new_slot" ]; then
docker rm -f "$new_id" >/dev/null || return 1
log "$step: removed new $(short "$new_id") (no slot: docker rm -f)"
return 0
fi
lb_set "$new_slot" maint || return 1
stopping=$(now)
docker stop --timeout 10 "$new_id" >/dev/null || return 1
stopped=$(($(now) - stopping))
exited=$(docker inspect -f '{{.State.ExitCode}}' "$new_id" 2>/dev/null || echo '?')
docker rm -f "$new_id" >/dev/null || return 1
if [ -n "$new_slot" ]; then
wait_address_gone "$new_addr"
lb_set "$new_slot" ready || return 1
fi
log "$step: removed new $(short "$new_id") (slot $new_slot: stop ${stopped}s, exit $exited)"
wait_address_gone "$new_addr"
lb_set "$new_slot" ready || return 1
}
cleanup() {