Собственные проверки ЛР6
Запустите стенд по REPORT.md. Python 3.11+ с python -m pip install -r research/requirements.txt включает Pillow для пиксельных проверок. Публичным tests/ достаточно Python 3.9+. В Windows используйте PYTHONUTF8=1.
Все сценарии выполняются последовательно на учебном стенде: часть тестов явно останавливает сервисы, внедряет отказы и восстанавливает настройки. Volumes не удаляются. Профиль для проверок наблюдаемости — OTEL_ENABLED=1, head sampling 1.0, обычный collector.yaml.
python scripts/check_contract.py
python scripts/validate_openapi.py # предварительно установить requirements-dev.txt
python tests/smoke.py --base-url http://127.0.0.1:8080
for suite in test_api test_idempotency test_attachments test_topology test_pipeline test_observability test_observability_retry test_reconcile5 test_resilience5 test_expiry test_dependencies; do
python -m unittest discover -s student-tests -p "$suite.py" -v || exit 1
done
python tests/resilience.py --mode persistence --action-script scripts/restart.sh --base-url http://127.0.0.1:8080
python tests/resilience.py --mode failover --action-script scripts/stop-one.sh --base-url http://127.0.0.1:8080
sh scripts/restore-replicas.sh
В Windows публичным resilience передаются restart.cmd / stop-one.cmd; восстановление API — docker compose up -d --wait --no-recreate --no-deps api. Failover повторяется с восстановлением, чтобы проверить обе реплики. Фактические остановленные контейнеры и перезапуск всех сервисов сохранены в evidence/recheck_2026-11-12/.
Набор содержит 66 тестов: API 12, идемпотентность 9, вложения 11, топология 6, pipeline 9, наблюдаемость 5, retry trace 1, reconciler 2, отказы pipeline 7, TTL 2, зависимости 2. Проверки наблюдаемости ищут реальные metrics/logs/traces, связь API → producer → consumer → S3/DB, retry в той же трассе, низкую кардинальность и отсутствие синтетических секретов в сигналах.
Исследования для выбранного трека (запускать после тестов, не одновременно):
mkdir -p evidence/my-run
python research/incidents.py --out evidence/my-run
python research/obs_cost.py --out evidence/my-run --profiles off on100 head10 tail --repeat 2
python research/plot_obs_cost.py --out evidence/my-run
Четыре контролируемых инцидента проверяют firing/resolved; off/on100/head10/tail сравниваются при одинаковых ресурсах, 64 клиентах, 8 процессах, 5 с прогрева и 30 с измерения (2 повтора). Эти прогоны занимают около 20 минут. Секреты создаются scripts/init-secrets.sh и в Git не входят. Все команды и реальные результаты текущей проверки — evidence/checks_2026-11-12.txt и evidence/recheck_2026-11-12/.