2.8 KiB
Очередь под нагрузкой
Три повтора; одинаковые CPU/RAM worker; batch 8, четыре HTTP-клиента.
| Файл | Concurrency / prefetch | Готовых/с, медиана | p95 до ready, s | p95 ожидания, s | RSS процессов, MiB |
|---|---|---|---|---|---|
| small | 1/1 | 4.411 | 1.524 | 1.291 | 157.6 |
| small | 2/2 | 3.625 | 1.675 | 1.319 | 165.2 |
| small | 4/4 | 3.904 | 1.788 | 1.052 | 281.9 |
| large | 1/1 | 0.808 | 7.693 | 6.868 | 189.7 |
| large | 2/2 | 0.951 | 6.520 | 4.749 | 268.6 |
| large | 4/4 | 0.813 | 8.308 | 4.477 | 378.8 |
p95: nearest rank; при batch 8 это максимальная задержка. RSS: сумма VmRSS процессов dotnet внутри worker, включая дочерние декодеры; общие страницы могут считаться несколько раз. memory.current измерен отдельно. Период выборок 200 ms плюс docker exec; короткие пики могут быть пропущены. Время включает загрузку batch и ожидание последнего ready, без регистрации и прогрева. Queue lag: от создания записи задания до первой processing. Время до ready: по часам PostgreSQL.
Backpressure: при остановленном worker лимит 4 принял ровно 4 из 8 файлов; остальные получили 429. После запуска обработались все четыре принятых задания.
Исходные результаты: evidence/overload.json. Один Docker-host, небольшие batch, параллельно могут работать другие локальные приложения. Эти значения не являются пределом производительности сервера. Вывод сравнения относится к этому профилю.
В этом профиле для small один обработчик оказался быстрее двух и четырёх. Для large вариант 2/2 дал лучшую медиану throughput и меньшую p95 готовности, чем 1/1, при большем RSS. Четыре обработчика уменьшили время ожидания начала, но увеличили полное время обработки и память. По умолчанию оставлены 2/1: два параллельных обработчика с небольшим prefetch. Пара 2/1 отдельно не входит в сравнение, поэтому не заявляется как измеренный оптимум.
