Files
2026-11-06 19:22:27 +03:00

4.7 KiB
Raw Permalink Blame History

Результаты трека 1

Дата UTC: 2026-11-06T16:08:28.320053+00:00. База: 482e7ff477c8cdd9c7e6ceae7833ba19f61d9d98.

Методика: queue-method.md. Исходные измерения: JSON, CSV.

18 замеров: 3 настройки concurrency, 3 размера, 2 повтора; 324 измеряемые загрузки. Prefetch на потребителя = 1. Все загрузки получили 202 и завершились с первой попытки.

Throughput и p95 усреднены по двум прогонам; lag и RSS — максимумы двух прогонов. В скобках указан диапазон throughput.

Размер Concurrency Файлов/с (диапазон) p95 ready, с p95 ожидания, с Max queued Peak RSS, MiB
320x200 1 0.37 (0.35–0.39) 48.43 46.43 18 221.1
320x200 2 0.62 (0.53–0.72) 28.74 25.25 16 357.2
320x200 4 0.58 (0.57–0.59) 30.57 27.27 16 624.7
1280x800 1 0.35 (0.32–0.39) 50.73 48.02 17 221.1
1280x800 2 0.57 (0.49–0.65) 31.20 28.02 16 357.5
1280x800 4 0.56 (0.55–0.56) 31.09 28.11 14 629.4
2560x1600 1 0.33 (0.29–0.36) 53.97 51.47 17 254.7
2560x1600 2 0.53 (0.49–0.58) 32.25 28.98 16 423.1
2560x1600 4 0.52 (0.50–0.54) 33.25 30.04 14 712.5

Перегрузка

При остановленном worker и лимите 12 обе API-реплики приняли ровно 12 из 24 загрузок; 12 получили 429 с Retry-After. Отказанные загрузки не создали метаданных или S3-объектов. Health и отправка сообщений оставались доступны.

После рестарта API/broker и запуска worker все 12 первоначальных ID стали ready. Проверены SHA-256 оригиналов и наличие трёх вариантов. Наблюдаемое время опустошения: 18.63 с (от запуска проверяющего процесса после старта worker). Новая загрузка после восстановления получила 202 и тоже завершилась.

Вывод и ограничения

Переход с 1 на 2 обработчика повышает средний throughput и сокращает ожидание на всех трёх размерах. Четыре обработчика не дают устойчивого выигрыша над двумя, но увеличивают RSS примерно до 626–713 MiB. Для этого стенда оставлено concurrency=2: это разумный компромисс задержки и памяти.

Гипотеза о пользе двух обработчиков подтверждается. Увеличение до четырёх имеет убывающую отдачу; на крупных файлах диапазоны throughput перекрываются. Результат совместим с ограничением worker в 2 CPU и накладными расходами запуска отдельного процесса на файл, но без CPU-профилирования разделить эти причины нельзя.

Docker: 8 CPU, примерно 7.76 GiB RAM; worker ограничен 2 CPU и 2 GiB. Всего два повтора, заметен разброс, доверительные интервалы не оценивались. Nearest-rank p95 для пакета из 18 файлов фактически равен максимуму. Это локальное сравнение, не универсальный SLA и не доказательство оптимальности concurrency=2 на любом оборудовании. Драйвер делит CPU-квоту с worker; RSS суммирует процессы и может повторно учитывать общие страницы. Полные ограничения и определения метрик приведены в методике.

Backpressure доказан для принятой незавершённой работы: advisory lock не позволил двум репликам превысить общий лимит. Он не ограничивает уже переданные HTTP bytes и общий архив готовых/failed вложений. После освобождения очереди приём автоматически возобновился.