5.0 KiB
Уровень 3 — сведения для отдельного отчёта
Приложение проверено на SQLAlchemy-коде 95511002b1. Новый код этой фазы — обвязка запуска и строгая проверка реальных spans. Команды запускаются через scripts/lab6.sh, задающий только порты ЛР6, project и NO_PROXY; значения secrets не выводятся. Дата/SHA и exit_code есть в каждом command log.
| Критерий | Команда и доказательство |
|---|---|
| Минимум lab5 | make test: smoke-ready.txt; make test-persistence: persistence.txt; failover каждой реплики: failover-first.txt/failover-second.txt; make level3: lab5-minimum.txt и ../level3.json (6 PASS) |
| Конфигурации и provisioning | make obs-validate: obs-validate.txt; obs_check.py grafana: grafana.txt (3 OK, 2 dashboards provisioned); runtime.json (non-root, лимиты, volumes, порты) |
| RED и worker metrics | obs_check.py dashboards --strict: dashboards.txt; cardinality.txt: реальные HTTP-шаблоны, done/failed/retry_scheduled/duplicate_noop |
| Запрос → лог → trace | obs_check.py request: request.txt, реальный POST server span и PostgreSQL client spans |
| Job → лог → trace | obs_check.py job: job-stable.txt, ready, consumer spans и trace/span IDs worker |
| Отсутствие содержимого | obs_check.py leaks: leaks.txt, все 4 маркера дают 0 в Loki и Tempo |
| История и независимость API | obs_recovery.py: telemetry-recovery.txt, прежние trace/log/metric после restart; smoke при остановленном Collector; SIGTERM API 4.592 с, exit 0 |
| Проверки кода | quality.txt: check/validate/lint PASS; student-tests.txt: 515 passed, 1 skipped, 19 deselected |
Collector принимает OTLP/HTTP и обрабатывает/экспортирует сигналы, не заменяя долговременную БД. Prometheus хранит временные ряды, Loki — структурные логи, Tempo — трассы. Grafana запрашивает эти хранилища и связывает сигналы через provisioned datasources. SDK запускается в процессе API после fork и в отдельных relay/worker. Batch processors и periodic reader не блокируют запрос на экспорт.
HTTP: http_server_request_duration_seconds_{bucket,sum,count}, labels http_route, http_request_method, http_response_status_code, service resource. RPS и классы статуса: messenger:http_requests:rate2m; error ratio — 5xx/все бизнес-запросы, health исключены. Worker: messenger_jobs_processed_total, messenger_job_duration_seconds_{bucket,sum,count}, labels job_type,outcome. Секунды; HTTP percentiles вычисляются histogram_quantile по сумме buckets реплик. Loki индексирует только service_name и environment; IDs остаются structured metadata. SDK не захватывает HTTP-заголовки и параметры БД, Collector дополнительно redacts подозрительные поля.
Ограничения и неуспешные попытки
smoke.txt запущен до завершения up --wait и закономерно получил connection refused; smoke-ready.txt — исправленный порядок. job.txt попал в рестарт persistence; job-stable.txt выполнен отдельно и прошёл. Эти неудачи сохранены и не объявлены PASS. Полный pipeline/failover выполнялся последовательно. Unit/integration tests использовали свои одноразовые контейнеры одновременно только с проверками чтения телеметрии; нагрузочных замеров уровня 5 здесь нет. Linux-only RLIMIT_AS пропущен на macOS, stack-маркер штатно исключил 19 тестов; обязательные публичные отказы выполнены отдельно.
Minor из переноса: scripts/limits.py и CI-allowlist ещё не знают сервисы OTel; проверка реальных ограничений выполнена независимо в runtime.json. REPORT.md оставлен отдельному отчётному агенту.
Чистый clone коммита 2903d9d: env EVIDENCE_DIR=evidence/grade3/clean sh scripts/clean-clone.sh, clean/clean-clone.txt. Пустые volumes, secrets, migrate, healthy, smoke, persistence, failover, upload failover, S3 outage, reconcile; exit_code 0. Временный project остановлен, volumes сохранены.