RabbitMQ (quorum queue, publisher confirms, manual ack, DLX) + отдельный worker: staging в S3 + вложение/job/outbox одной транзакцией -> 202 queued; relay outbox, lease с heartbeat и fencing (worker_id, attempt), retry с backoff+jitter, failed-реестр, безопасный replay с audit; thumbnail/crop/WebP в изолированном процессе с лимитами. Тесты окон отказа (fault injection), трек 1 «Очередь под перегрузкой» с backpressure. Перенесено исправление замечания lab3 PR #99 (U+0000 в тексте). Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
29 lines
1.4 KiB
Python
29 lines
1.4 KiB
Python
"""Точки внедрения отказов для тестов окон отказа (contracts/attachment-states.md).
|
|
|
|
Точка активируется файлом /tmp/fault-<name> внутри контейнера (tmpfs; создаётся тестом через
|
|
`docker exec -u 10001 <c> touch /tmp/fault-<name>`). Срабатывает один раз: файл удаляется, процесс
|
|
завершается os._exit — без finally, ack, закрытия соединений, как при kill -9. Docker перезапускает
|
|
контейнер (restart: unless-stopped), tmpfs при этом пустой. В обычной работе файлов нет — это no-op.
|
|
|
|
Точки:
|
|
api_crash_after_commit API: после COMMIT вложения+job+outbox, до ответа 202 и до publish;
|
|
worker_crash_after_s3 worker: варианты и оригинал записаны в S3, COMMIT результата ещё нет;
|
|
worker_crash_after_commit worker: результат зафиксирован (ready), ack брокеру ещё не отправлен.
|
|
"""
|
|
import logging
|
|
import os
|
|
|
|
log = logging.getLogger('messenger.faults')
|
|
|
|
|
|
def hit(name: str) -> None:
|
|
path = f'/tmp/fault-{name}'
|
|
if not os.path.exists(path):
|
|
return
|
|
try:
|
|
os.remove(path)
|
|
except OSError:
|
|
pass
|
|
log.error('FAULT INJECTION %s: hard exit', name)
|
|
os._exit(86)
|