Files
mtusi2026lab3/experiments/lab3-scale/docs/method.md
T
2026-10-10 21:32:33 +03:00

8.0 KiB
Raw Blame History

Методика проверки масштабирования

Что проверяем

H1. Если разделить прежние 1 CPU и 256 MiB между четырьмя API вместо одной, прирост предельной нагрузки будет меньше 20%: C4 / C1 < 1.20.

H2. Если каждой API дать по 0.5 CPU и 128 MiB, четыре реплики выдержат хотя бы в 1.5 раза больше запросов, чем одна: C4 / C1 >= 1.50.

C — последняя подряд проходящая ступень нагрузки. Ступень проходит, когда успешны не менее 99% запланированных запросов, p95 успешных ответов не превышает 500 мс, генератор успевает отправлять нагрузку и все подтверждённые записи найдены в БД.

Если 300 запросов/с проходят, а 400 уже нет, предел находится между 300 и 400. Это интервал сетки, а не точное значение и не доверительный интервал. Для H1 верхняя граница отношения должна быть ниже 1.20; для H2 нижняя — не меньше 1.50. Обратные границы доказывают опровержение. Если интервал пересекает порог, данных недостаточно. Для общего вывода решения всех трёх повторов должны совпасть. Немонотонность, неверные условия или ненайденная граница дают неопределённый результат.

Конфигурации

Условие Реплики CPU / RAM каждой CPU / RAM всех API Соединения БД: каждой / всего
A1 1 1 / 256 MiB 1 / 256 MiB 12 / 12
A2 2 0.5 / 128 MiB 1 / 256 MiB 6 / 12
A4 4 0.25 / 64 MiB 1 / 256 MiB 3 / 12
B1 1 0.5 / 128 MiB 0.5 / 128 MiB 12 / 12
B2 2 0.5 / 128 MiB 1 / 256 MiB 6 / 12
B4 4 0.5 / 128 MiB 2 / 512 MiB 3 / 12

PostgreSQL получает 1 CPU / 512 MiB, Redis — 0.25 CPU / 128 MiB, HAProxy — 0.5 CPU / 128 MiB во всех условиях. Общий пул БД ограничен 12 соединениями, чтобы добавление API не увеличивало его автоматически. A2 и B2 одинаковы по настройкам, но измерены отдельно.

Образ приложения один, Go 1.22.2; на исходной машине фактический GOMAXPROCS=16. HAProxy использует roundrobin без повторной отправки неудачного запроса. Проверки готовности идут раз в секунду; для переключения нужны две успешные или неуспешные проверки.

Один прогон

  1. Пересоздаём API и восстанавливаем 200 пользователей, 100 чатов, 10000 сообщений. Подготавливаем сессии Redis. PostgreSQL и Redis продолжают работать; файловый кэш ОС не сбрасываем.
  2. Прогреваем приложение 15 секунд при 25 запросах/с.
  3. Отправляем заданную нагрузку 30 секунд: 80% POST сообщений и 20% GET первой страницы истории, limit=50. Каждый POST имеет новый ключ идемпотентности и текст 128 байт. Вход по паролю не измеряется.
  4. Ждём ответы на начатые запросы, сопоставляем каждую подтверждённую запись с сообщением и ключом идемпотентности в БД.
  5. Сохраняем результаты и выдерживаем паузу 10 секунд.

Генератор отправляет запросы по расписанию, не ожидая предыдущего ответа. Если сервер не успевает, появляется очередь и растёт задержка. Таймаут — 5 секунд, повторов нет. Задержка отсчитывается от запланированной отправки и включает отставание генератора.

Нагрузки: 100, 200, 250, 300, 400, 500, 800 запросов/с. Три повтора, всего 6 × 7 × 3 = 126 прогонов. Конфигурации перемешиваются, ступени внутри них возрастают. Seed нагрузки — 230300, seeds порядка — 230301, 230302, 230303. Лимит одновременно выполняющихся запросов — 8192.

Метрики и пригодность данных

Сохраняем ответы и ошибки, p50/p95/p99, CPU/RAM и ограничения CPU контейнеров, ожидание соединений pgx, подключения и ожидания PostgreSQL, состояния и очередь HAProxy, CPU и отставание генератора. Целевая частота наблюдения — раз в секунду; фактическое время есть в данных.

На графике пропускной способности считаем успешные ответы внутри 30-секундного окна. Поздние ответы сохраняем отдельно. p95 относится только к успешным ответам, поэтому его нужно читать вместе с долей успехов: массовые таймауты могут оставить небольшой p95 у остальных ответов.

Прогон непригоден при ошибке сборщика ресурсов/БД, неверном коде, данных или лимитах, посторонней нагрузке либо ограничении генератора. Последнее означает: больше 1% запросов не отправлены из-за локального лимита, или p95 отставания больше 100 мс при среднем CPU процесса не ниже 0.85 ядра. Необъяснённое отставание обсуждается как ограничение. Недоступная статистика перегруженного HAProxy сохраняется как наблюдение. Ошибки API, OOM и плохая производительность не служат причиной удалить результат.

Повторяемость и ограничения

У стенда отдельные volumes, одинаковые начальные данные и фиксированные ресурсы. Сохраняются seeds, образы, хеши, протокол, порядок и архив исходников. Пилоты отделены от основной серии. Проверки настройки используют новые прогоны.

Все повторы сделаны на одном компьютере. Они показывают разброс, но не подтверждают тот же эффект на другом оборудовании. Генератор делит хост с Docker; наблюдение и healthchecks тоже потребляют ресурсы.

Параметры нового запуска, исходный протокол, результаты.