Files
mtusi2026lab3/student-tests/README.md
T

3.9 KiB
Raw Blame History

Собственные проверки лабораторной 3

Все тесты создают только синтетические данные. Работать из корня проекта. На Windows установить PYTHONUTF8=1.

  • python student-tests/test_lab3.py: 32 конкурентных повтора через LB, наблюдение двух процессов, один результат, 409 для другого тела, неверные ключи, ACL, области пользователя/чата, отзыв сессии.
  • python scripts/experiments.py --phase rolling: поочерёдное удаление и пересоздание каждой API-реплики под нагрузкой. Docker-доступ необходим.
  • python scripts/experiments.py --phase matrix: три повтора 1/2/4 реплик при фиксированных суммарных CPU/RAM и при росте ресурсов. Порядок перемешан с seed=2301.
  • python scripts/experiments.py --phase saturation: интенсивность 4/16/64/128 параллельных клиентов, два повтора каждой точки.
  • python scripts/experiments.py --phase pool: три парных сравнения размера пула 1 и 10 на реплику при конкуренции 64.
  • python scripts/experiments.py --phase optimize: три парных сравнения исходного и улучшенного пути записи в одном образе при одинаковых ресурсах. OPTIMIZED_WRITES=0/1, по умолчанию включено улучшение.
  • python student-tests/test_dependencies.py: явная остановка Redis и PostgreSQL с восстановлением; fallback к БД, ограниченный отказ 503, прежняя сессия после восстановления.
  • python student-tests/test_transactions.py: имитация expiry ключа изменением только собственной тестовой строки, затем искусственная ошибка 500 через временный trigger, снятие trigger и успешный retry того же ключа. Выполнять отдельно от нагрузки; trigger ограничен UUID нового синтетического чата и удаляется в finally.
  • python scripts/plot_results.py: построение графиков Matplotlib из сохранённых JSON, без новых запросов к приложению.

benchmark.py запускается скриптом эксперимента внутри отдельного контейнера (2 CPU, 512 MiB) и той же сети. Каждый поток держит своё HTTP-соединение; прозрачных повторов POST нет. Внутренняя нагрузка также идёт через HAProxy. Секреты и токены в результаты не записываются.

Начальная история нового чата — 100 сообщений. Прогрев 5 с, замер 20 с (rolling 45 с). Сохраняются p50/p95/p99 успешных запросов, ошибки, ID процессов, размер набора, CPU/RAM и состояния ожидания БД. Это closed-loop эксперимент с coordinated omission, а не доказательство предельной производительности при произвольном входном потоке.

Публичные тесты tests/ сохранены. Собственные тесты лабораторной 2, привязанные к одиночному API и не передающие обязательный ключ, не выдаются за совместимые тесты лабораторной 3.