From 718d34e0a159ae5715c7971fb0a561ea373d5924 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?=D0=93=D0=BE=D0=BB=D0=B8=D0=BA=D0=BE=D0=B2=20Maximillian?= =?UTF-8?q?=20=D0=90=D0=BD=D1=82=D0=BE=D0=BD?= Date: Sat, 10 Oct 2026 22:05:36 +0300 Subject: [PATCH] docs(report): final --- REPORT.md | 78 +++++++++++++++++++++++++++---- evidence/new_ev/series-a.csv | 64 +++++++++++++++++++++++++ evidence/new_ev/series-b-1000.csv | 17 +++++++ evidence/new_ev/series-b-200.csv | 15 ++++++ evidence/new_ev/series-b-400.csv | 15 ++++++ evidence/new_ev/series-b-600.csv | 15 ++++++ evidence/new_ev/series-b-800.csv | 17 +++++++ evidence/new_ev/series-c.csv | 65 ++++++++++++++++++++++++++ 8 files changed, 278 insertions(+), 8 deletions(-) create mode 100644 evidence/new_ev/series-a.csv create mode 100644 evidence/new_ev/series-b-1000.csv create mode 100644 evidence/new_ev/series-b-200.csv create mode 100644 evidence/new_ev/series-b-400.csv create mode 100644 evidence/new_ev/series-b-600.csv create mode 100644 evidence/new_ev/series-b-800.csv create mode 100644 evidence/new_ev/series-c.csv diff --git a/REPORT.md b/REPORT.md index f7cad2fe..03ca8054 100644 --- a/REPORT.md +++ b/REPORT.md @@ -2,7 +2,7 @@ - Автор, группа: Голиков, БВТ2303 - Целевая оценка: на 5, трек 1 "Цена масштабирования" -- Commit/PR: e769e08 +- Commit/PR: 018de46 - Использованные источники, библиотеки и помощь ИИ: - Скелет лабы 3 и материалы курса: COURSE.md, contracts/openapi.json, contracts/README.md - Документация Docker Compose (services, deploy.resources), nginx upstream, k6 constant-arrival-rate @@ -144,8 +144,8 @@ postgres_data и redis_data): 5. CPU/RAM лимиты на api, postgres, redis через deploy.resources. 6. LB на nginx перед двумя репликами. Публичный порт только у LB, реплики доступны только через expose. -7. Включён upstream keepalive в nginx (см. трек 1, это подтверждённое - улучшение пропускной способности). +7. Настроен upstream keepalive в nginx (keepalive 32, keepalive_requests, + keepalive_timeout) как часть стандартной конфигурации LB. Соответствие переменных .env.example реальной конфигурации: @@ -172,6 +172,7 @@ postgres_data и redis_data): | Остановка одной реплики <= 10 с | make test-failover | first_recovery_seconds 2.466 | evidence/test-failover.log | | Поочерёдная остановка каждой | make test-failover дважды | второй прогон 2.487 с, останавливалась другая реплика | evidence/test-failover-second.log | | Идемпотентность POST | PYTHONUTF8=1 make test (replay с тем же ключом) + make test-failover (uncertain retry) | тот же ответ, дублей нет | evidence/test-failover.log | +| Идемпотентность POST: replay с attachment_ids: [] | PYTHONUTF8=1 python3 student-tests/test_regressions.py --base-url http://localhost:8080 | PASS: attachment_ids: [] и его отсутствие семантически равны | student-tests/test_regressions.py | | Persistence после restart | make test-persistence | PASS, прежний токен работает | evidence/test-persistence.log | Уровень 4: @@ -319,8 +320,8 @@ RPS, saturation point». Это была ошибка методики: изме | 200 | 197 | 4.2 ms | 13 ms | 0 | 0 % | | 400 | 395 | 4.0 ms | 80 ms | 0 | 0 % | | 600 | 591 | 6.0 ms | 232 ms | 0 | 0 % | -| 800 | 719 | 4.50 с | 5.40 с | 26 | 0 % | -| 1000 | 682 | 7.00 с | 7.80 с | 231 | 0 % | +| 800 | 719 | 4500 ms | 5400 ms | 26 | 0 % | +| 1000 | 682 | 7000 ms | 7800 ms | 231 | 0 % | До RATE=600 система ведёт себя линейно: @@ -387,7 +388,7 @@ VU и latency, а не потолок серверного стека. Наст | Конфигурация | Успешных RPS | p95 latency | Dropped/s | Ошибки | | --- | --- | --- | --- | --- | -| 2 × 0.25 / 128M | 436 | 7.5 с | 260 | 2.4 % | +| 2 × 0.25 / 128M | 436 | 7.5 с | 260 | 0 % / 4.88 % (run1/run2) | | 2 × 0.5 / 256M | **742** | 2.9 с | 12 | 0 % | | 2 × 1.0 / 512M | 698 | 4.7 с | 50 | 0 % | | 2 × 2.0 / 1G | 733 | 4.2 с | 22 | 0 % | @@ -395,7 +396,8 @@ VU и latency, а не потолок серверного стека. Наст **Конфигурация 2 × 0.25 / 128M не тянет RATE=800.** Успешных RPS 436 из 800 - около половины спроса. p95 latency 7.5 секунд, потеряно 260 итераций в секунду, во втором прогоне появились серверные ошибки -4.88 %. По `docker stats` обе api-реплики держат ровно 127.9 MiB / 128 +4.88 % - сервер начал отказывать под memory pressure. По `docker stats` +обе api-реплики держат ровно 127.9 MiB / 128 MiB, то есть упираются в memory limit. Go-runtime в memory pressure: GC работает агрессивно, stop-the-world паузы дают многократный рост latency, часть запросов не дожидается ответа. @@ -532,4 +534,64 @@ stats api-реплики держат 25–30 %, Postgres 45–50 %, LB 10 %). keepalive) не подтвердились при повторном анализе. Причина - ошибки методики: измерение спроса вместо предела, отсутствие серии с ростом ресурсов, смешивание успешных и потерянных итераций. -В текущей версии эти ошибки исправлены. \ No newline at end of file +В текущей версии эти ошибки исправлены. + +## Ограничения и следующие шаги + +Что выдерживает: + +- Отказ одной API-реплики (любой из двух) при RATE до 400 RPS. +- Graceful drain с сохранением in-flight запросов. +- Rolling update без простоя. +- Перезапуск всего стека с сохранением данных и сессий. +- Нагрузку до точки насыщения, измеренной в треке 1 (~650-700 RPS). + +Что не выдерживает: + +- Отказ узла. Всё работает на одном хосте, потеря хоста = потеря системы. + Postgres и Redis без репликации, LB без резерва. +- RATE выше ~650-700 RPS: рост latency и потери итераций k6. Точка + насыщения измерена в серии B трека 1. + +Не реализовано в этой работе: + +- PgBouncer. Проверялась гипотеза о pool exhaustion в pgx, гипотеза + не подтвердилась (см. первую версию трека 1), поэтому PgBouncer не + добавлен. +- Вторая реплика Postgres и failover БД. Не входит в обязательный + минимум, отмечено как SPOF в ограничениях. +- HTTPS. По контракту требуется только с ЛР7, здесь HTTP для локального + стенда. +- Полноценная распределённая нагрузка. k6 на одной машине со стеком + измеряет не только стек, но и клиент. Это ключевое ограничение трека 1. + +Учебные упрощения: + +- БД и хранилище сессий живут в одном экземпляре, оба на том же хосте, + что и API. Для уровня 3 достаточно, для продакшена недостаточно. +- Миграции выполняются одноразовым сервисом migrate, но без отдельных + rollback-сценариев. Если миграция падает, стек не поднимается. + +Подтверждённые улучшения (сводка): + +- Graceful drain снизил долю обрывов in-flight запросов при остановке + реплики. docker stop даёт серверу корректно завершиться с exit 0. +- Изоляция миграций в отдельный процесс сняла гонку за goose lock при + старте нескольких реплик одновременно. +- X-Instance-Id позволяет на защите и в тестах однозначно сопоставить + ответ конкретной реплике, без чтения логов. +- Оптимальный размер реплики: 0.5 CPU / 256M. Меньше - memory pressure + в Go-runtime, больше - не даёт прироста. Подтверждено серией C + трека 1: +70 % успешных, p95 в 2.6 раза ниже, dropped в 21 раз + меньше при переходе с 0.25/128M на 0.5/256M. + +Оставшиеся гипотезы (не проверены из-за ограничений стенда): + +- Накладные расходы nginx при проксировании. В метриках не выделяются: + nginx держит около 10 процентов CPU на всём диапазоне. + +Следующий шаг для полной картины: вынести нагрузочный генератор на +отдельный физический хост, провести серию с RATE выше 1000 RPS и найти +настоящую точку отказа серверного стека. Тогда же можно отдельно +измерить вклад nginx, Postgres и сети, который сейчас скрыт за +клиентским bottleneck'ом. diff --git a/evidence/new_ev/series-a.csv b/evidence/new_ev/series-a.csv new file mode 100644 index 00000000..cabe6fab --- /dev/null +++ b/evidence/new_ev/series-a.csv @@ -0,0 +1,64 @@ +config,run,metric,value +rep1-cpu1.0-mem512M,1,write_total.rate,396.9147682757007 +rep1-cpu1.0-mem512M,1,http_reqs.rate,396.9395754487179 +rep1-cpu1.0-mem512M,1,write_latency_ms.avg,3.6438378875000246 +rep1-cpu1.0-mem512M,1,write_latency_ms.p(90),3.8937199999999996 +rep1-cpu1.0-mem512M,1,write_latency_ms.p(95),4.2524 +rep1-cpu1.0-mem512M,1,write_latency_ms.max,169.4691 +rep1-cpu1.0-mem512M,1,vus_max.value,800 +rep1-cpu1.0-mem512M,2,write_total.rate,398.0077206134656 +rep1-cpu1.0-mem512M,2,http_reqs.rate,398.03259609600394 +rep1-cpu1.0-mem512M,2,write_latency_ms.avg,3.2020571541666505 +rep1-cpu1.0-mem512M,2,write_latency_ms.p(90),3.7152 +rep1-cpu1.0-mem512M,2,write_latency_ms.p(95),4.0011 +rep1-cpu1.0-mem512M,2,write_latency_ms.max,55.0712 +rep1-cpu1.0-mem512M,2,vus_max.value,800 +rep1-cpu1.0-mem512M,3,write_total.rate,398.66205923290477 +rep1-cpu1.0-mem512M,3,http_reqs.rate,398.68697561160684 +rep1-cpu1.0-mem512M,3,write_latency_ms.avg,3.1599093291666684 +rep1-cpu1.0-mem512M,3,write_latency_ms.p(90),3.7155099999999996 +rep1-cpu1.0-mem512M,3,write_latency_ms.p(95),4.0008 +rep1-cpu1.0-mem512M,3,write_latency_ms.max,21.2291 +rep1-cpu1.0-mem512M,3,vus_max.value,800 +rep2-cpu0.5-mem256M,1,write_total.rate,397.0886528801121 +rep2-cpu0.5-mem256M,1,http_reqs.rate,397.1134709209171 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,3.730664437499994 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),3.7443 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),4.054214999999998 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,221.6521 +rep2-cpu0.5-mem256M,1,vus_max.value,800 +rep2-cpu0.5-mem256M,2,write_total.rate,397.3458041976314 +rep2-cpu0.5-mem256M,2,http_reqs.rate,397.3706377930272 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,3.2759642215787452 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),3.7372 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),4.003 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,44.9461 +rep2-cpu0.5-mem256M,2,vus_max.value,800 +rep2-cpu0.5-mem256M,3,write_total.rate,397.34261530318344 +rep2-cpu0.5-mem256M,3,http_reqs.rate,397.3674492166399 +rep2-cpu0.5-mem256M,3,write_latency_ms.avg,3.3407634458333675 +rep2-cpu0.5-mem256M,3,write_latency_ms.p(90),3.9099 +rep2-cpu0.5-mem256M,3,write_latency_ms.p(95),4.218 +rep2-cpu0.5-mem256M,3,write_latency_ms.max,60.789 +rep2-cpu0.5-mem256M,3,vus_max.value,800 +rep4-cpu0.25-mem128M,1,write_total.rate,393.89957622171187 +rep4-cpu0.25-mem128M,1,http_reqs.rate,393.9241944323463 +rep4-cpu0.25-mem128M,1,write_latency_ms.avg,4.617149742713689 +rep4-cpu0.25-mem128M,1,write_latency_ms.p(90),4.0018 +rep4-cpu0.25-mem128M,1,write_latency_ms.p(95),4.4948 +rep4-cpu0.25-mem128M,1,write_latency_ms.max,524.6304 +rep4-cpu0.25-mem128M,1,vus_max.value,800 +rep4-cpu0.25-mem128M,2,write_total.rate,393.78662832050185 +rep4-cpu0.25-mem128M,2,http_reqs.rate,393.8112394720395 +rep4-cpu0.25-mem128M,2,write_latency_ms.avg,4.100821487052345 +rep4-cpu0.25-mem128M,2,write_latency_ms.p(90),4.1949 +rep4-cpu0.25-mem128M,2,write_latency_ms.p(95),5.1462 +rep4-cpu0.25-mem128M,2,write_latency_ms.max,288.2237 +rep4-cpu0.25-mem128M,2,vus_max.value,800 +rep4-cpu0.25-mem128M,3,write_total.rate,394.4866549703591 +rep4-cpu0.25-mem128M,3,http_reqs.rate,394.511309872651 +rep4-cpu0.25-mem128M,3,write_latency_ms.avg,3.6398426178621053 +rep4-cpu0.25-mem128M,3,write_latency_ms.p(90),3.9956 +rep4-cpu0.25-mem128M,3,write_latency_ms.p(95),4.2448 +rep4-cpu0.25-mem128M,3,write_latency_ms.max,86.0005 +rep4-cpu0.25-mem128M,3,vus_max.value,800 diff --git a/evidence/new_ev/series-b-1000.csv b/evidence/new_ev/series-b-1000.csv new file mode 100644 index 00000000..ddaf2e84 --- /dev/null +++ b/evidence/new_ev/series-b-1000.csv @@ -0,0 +1,17 @@ +config,run,metric,value +rep2-cpu0.5-mem256M,1,write_total.rate,721.8249956327732 +rep2-cpu0.5-mem256M,1,http_reqs.rate,721.8706460878474 +rep2-cpu0.5-mem256M,1,dropped_iterations.rate,191.1841058506232 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,4517.129968266742 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),6323.4827000000005 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),6456.36425 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,6736.0397 +rep2-cpu0.5-mem256M,1,vus_max.value,4000 +rep2-cpu0.5-mem256M,2,write_total.rate,642.12362007902 +rep2-cpu0.5-mem256M,2,http_reqs.rate,642.1692968196716 +rep2-cpu0.5-mem256M,2,dropped_iterations.rate,271.41119295131153 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,5235.301641421281 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),6978.46239 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),7433.966485 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,7827.1602 +rep2-cpu0.5-mem256M,2,vus_max.value,4000 diff --git a/evidence/new_ev/series-b-200.csv b/evidence/new_ev/series-b-200.csv new file mode 100644 index 00000000..6dbea3a1 --- /dev/null +++ b/evidence/new_ev/series-b-200.csv @@ -0,0 +1,15 @@ +config,run,metric,value +rep2-cpu0.5-mem256M,1,write_total.rate,197.31590683614613 +rep2-cpu0.5-mem256M,1,http_reqs.rate,197.36523170244965 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,3.3276426797766807 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),3.7283 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),4.1869 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,12.8598 +rep2-cpu0.5-mem256M,1,vus_max.value,400 +rep2-cpu0.5-mem256M,2,write_total.rate,197.47169035743912 +rep2-cpu0.5-mem256M,2,http_reqs.rate,197.52105416637772 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,3.2765851929005985 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),3.71 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),4.0384 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,10.0245 +rep2-cpu0.5-mem256M,2,vus_max.value,400 diff --git a/evidence/new_ev/series-b-400.csv b/evidence/new_ev/series-b-400.csv new file mode 100644 index 00000000..e767bec8 --- /dev/null +++ b/evidence/new_ev/series-b-400.csv @@ -0,0 +1,15 @@ +config,run,metric,value +rep2-cpu0.5-mem256M,1,write_total.rate,394.53267497800704 +rep2-cpu0.5-mem256M,1,http_reqs.rate,394.58198950760726 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,3.3621370817882386 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),3.9626 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),4.1185 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,80.0027 +rep2-cpu0.5-mem256M,1,vus_max.value,800 +rep2-cpu0.5-mem256M,2,write_total.rate,395.18172626218734 +rep2-cpu0.5-mem256M,2,http_reqs.rate,395.2311219198177 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,3.299516145160586 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),3.7902 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),4.0067 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,50.0027 +rep2-cpu0.5-mem256M,2,vus_max.value,800 diff --git a/evidence/new_ev/series-b-600.csv b/evidence/new_ev/series-b-600.csv new file mode 100644 index 00000000..cc4ac110 --- /dev/null +++ b/evidence/new_ev/series-b-600.csv @@ -0,0 +1,15 @@ +config,run,metric,value +rep2-cpu0.5-mem256M,1,write_total.rate,591.55693321979 +rep2-cpu0.5-mem256M,1,http_reqs.rate,591.6062282615849 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,5.437148204216531 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),4.0013 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),5.9984 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,231.8701 +rep2-cpu0.5-mem256M,1,vus_max.value,1200 +rep2-cpu0.5-mem256M,2,write_total.rate,591.2531324459899 +rep2-cpu0.5-mem256M,2,http_reqs.rate,591.302402171757 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,4.611455562345495 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),4.2592 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),7.001 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,130.746 +rep2-cpu0.5-mem256M,2,vus_max.value,1200 diff --git a/evidence/new_ev/series-b-800.csv b/evidence/new_ev/series-b-800.csv new file mode 100644 index 00000000..e60c5819 --- /dev/null +++ b/evidence/new_ev/series-b-800.csv @@ -0,0 +1,17 @@ +config,run,metric,value +rep2-cpu0.5-mem256M,1,write_total.rate,725.3991090037861 +rep2-cpu0.5-mem256M,1,http_reqs.rate,725.4458667135324 +rep2-cpu0.5-mem256M,1,dropped_iterations.rate,22.73983283994078 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,2454.367098762404 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),3665.7873 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),4096.1525599999995 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,4590.6913 +rep2-cpu0.5-mem256M,1,vus_max.value,2895 +rep2-cpu0.5-mem256M,2,write_total.rate,712.1827303892608 +rep2-cpu0.5-mem256M,2,http_reqs.rate,712.2290411769744 +rep2-cpu0.5-mem256M,2,dropped_iterations.rate,28.789873028632737 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,2746.757344458653 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),4661.001859999999 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),4939.050329999997 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,5444.0319 +rep2-cpu0.5-mem256M,2,vus_max.value,3200 diff --git a/evidence/new_ev/series-c.csv b/evidence/new_ev/series-c.csv new file mode 100644 index 00000000..8e2c130f --- /dev/null +++ b/evidence/new_ev/series-c.csv @@ -0,0 +1,65 @@ +config,run,metric,value +rep2-cpu0.25-mem128M,1,write_total.rate,453.2065610320589 +rep2-cpu0.25-mem128M,1,http_reqs.rate,453.2505161491899 +rep2-cpu0.25-mem128M,1,dropped_iterations.rate,250.0753130639849 +rep2-cpu0.25-mem128M,1,write_latency_ms.avg,6093.802205764284 +rep2-cpu0.25-mem128M,1,write_latency_ms.p(90),7016.492800000001 +rep2-cpu0.25-mem128M,1,write_latency_ms.p(95),7526.062404999999 +rep2-cpu0.25-mem128M,1,write_latency_ms.max,7942.0795 +rep2-cpu0.25-mem128M,1,vus_max.value,3200 +rep2-cpu0.25-mem128M,2,write_total.rate,418.64341387003867 +rep2-cpu0.25-mem128M,2,http_reqs.rate,418.6864295991071 +rep2-cpu0.25-mem128M,2,dropped_iterations.rate,269.60825122438393 +rep2-cpu0.25-mem128M,2,write_latency_ms.avg,6538.852833797988 +rep2-cpu0.25-mem128M,2,write_latency_ms.p(90),9338.392780000002 +rep2-cpu0.25-mem128M,2,write_latency_ms.p(95),9660.761299999998 +rep2-cpu0.25-mem128M,2,write_latency_ms.max,11119.5976 +rep2-cpu0.25-mem128M,2,vus_max.value,3200 +rep2-cpu0.5-mem256M,1,write_total.rate,748.5830475147193 +rep2-cpu0.5-mem256M,1,http_reqs.rate,748.6303802538869 +rep2-cpu0.5-mem256M,1,dropped_iterations.rate,8.740779166276493 +rep2-cpu0.5-mem256M,1,write_latency_ms.avg,1769.8529807802556 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(90),2675.3608999999997 +rep2-cpu0.5-mem256M,1,write_latency_ms.p(95),2879.9886500000002 +rep2-cpu0.5-mem256M,1,write_latency_ms.max,3112.068 +rep2-cpu0.5-mem256M,1,vus_max.value,2089 +rep2-cpu0.5-mem256M,2,write_total.rate,736.1132987779325 +rep2-cpu0.5-mem256M,2,http_reqs.rate,736.1603107397909 +rep2-cpu0.5-mem256M,2,dropped_iterations.rate,16.09376160950604 +rep2-cpu0.5-mem256M,2,write_latency_ms.avg,2110.4978718567586 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(90),3333.6357300000004 +rep2-cpu0.5-mem256M,2,write_latency_ms.p(95),3529.0254649999997 +rep2-cpu0.5-mem256M,2,write_latency_ms.max,3813.0537 +rep2-cpu0.5-mem256M,2,vus_max.value,2483 +rep2-cpu1.0-mem512M,1,write_total.rate,683.5291672113441 +rep2-cpu1.0-mem512M,1,http_reqs.rate,683.575923430457 +rep2-cpu1.0-mem512M,1,dropped_iterations.rate,64.57033859490159 +rep2-cpu1.0-mem512M,1,write_latency_ms.avg,3347.980236621289 +rep2-cpu1.0-mem512M,1,write_latency_ms.p(90),4642.26784 +rep2-cpu1.0-mem512M,1,write_latency_ms.p(95),4729.05158 +rep2-cpu1.0-mem512M,1,write_latency_ms.max,5003.5691 +rep2-cpu1.0-mem512M,1,vus_max.value,3200 +rep2-cpu1.0-mem512M,2,write_total.rate,712.2830965103443 +rep2-cpu1.0-mem512M,2,http_reqs.rate,712.3298946376199 +rep2-cpu1.0-mem512M,2,dropped_iterations.rate,36.50253927496563 +rep2-cpu1.0-mem512M,2,write_latency_ms.avg,2518.4434249381343 +rep2-cpu1.0-mem512M,2,write_latency_ms.p(90),4216.3193 +rep2-cpu1.0-mem512M,2,write_latency_ms.p(95),4369.1268 +rep2-cpu1.0-mem512M,2,write_latency_ms.max,4646.5564 +rep2-cpu1.0-mem512M,2,vus_max.value,3200 +rep2-cpu2.0-mem1G,1,write_total.rate,720.7435535035722 +rep2-cpu2.0-mem1G,1,http_reqs.rate,720.7903996483965 +rep2-cpu2.0-mem1G,1,dropped_iterations.rate,28.81037906694884 +rep2-cpu2.0-mem1G,1,write_latency_ms.avg,2903.1001716201745 +rep2-cpu2.0-mem1G,1,write_latency_ms.p(90),4055.11845 +rep2-cpu2.0-mem1G,1,write_latency_ms.p(95),4241.56125 +rep2-cpu2.0-mem1G,1,write_latency_ms.max,4565.337 +rep2-cpu2.0-mem1G,1,vus_max.value,3194 +rep2-cpu2.0-mem1G,2,write_total.rate,745.110636964332 +rep2-cpu2.0-mem1G,2,http_reqs.rate,745.1581810325406 +rep2-cpu2.0-mem1G,2,dropped_iterations.rate,15.610302395139252 +rep2-cpu2.0-mem1G,2,write_latency_ms.avg,2122.849284709457 +rep2-cpu2.0-mem1G,2,write_latency_ms.p(90),2929.8991 +rep2-cpu2.0-mem1G,2,write_latency_ms.p(95),3065.7545 +rep2-cpu2.0-mem1G,2,write_latency_ms.max,3286.2418 +rep2-cpu2.0-mem1G,2,vus_max.value,2409