Bring the Claude Code settings, the lint hook, the opsx commands and skills, the architecture notes, the lab 1 to lab 5 specs and the archived lab 1 to lab 5 changes into the lab 6 skeleton, so lab 6 continues the same spec history instead of starting from scratch. The files come from the lab 5 solution commit 64d5c67. Rewrite AGENTS.md and the openspec context and rules for lab 6: the business API stays at contract 1.6.0, API, relay and worker start the OpenTelemetry SDK in every process after fork and export OTLP over HTTP to a separate Collector, Prometheus, Loki and Tempo store metrics, logs and traces on volumes, Grafana only reads them through provisioning kept in Git, telemetry never blocks a request and never feeds /health/ready, metric labels stay low-cardinality and message bodies and secrets never leave the process. Out of scope moves to lab 7, track 2 and clustered telemetry backends. Co-Authored-By: Claude Opus 5.5 (1M context) <noreply@anthropic.com>
3.8 KiB
lab2-dependency-failures Specification
Purpose
Определяет поведение API при отказе PostgreSQL и при исчерпании пула соединений: ограниченная по времени ошибка 503 вместо зависания, 500 или анонимного доступа, и восстановление без рестарта процесса.
Requirements
Requirement: Отказ PostgreSQL даёт ограниченную ошибку
При недоступном PostgreSQL защищённые endpoint и /health/ready каждой реплики SHALL отвечать 503 с кодом unavailable в общем формате ошибки быстрее 2 секунд. Проверка сессии, которая не смогла обратиться к БД, SHALL давать 503, а не 401, и SHALL NOT пропускать запрос. /health/live реплики SHALL отвечать 200. Балансировщик SHALL исключить все реплики из ротации не позднее чем через 1,5 с после отказа и SHALL сам отвечать на любой запрос 503 в общем формате ошибки с request_id, равным X-Request-Id; после возвращения PostgreSQL реплики SHALL вернуться в ротацию без перезапуска.
Scenario: PostgreSQL остановлен
- WHEN сервис
postgresостановлен - THEN
GET /health/readyиGET /api/v1/users/meчерез LB отвечают503 unavailableбыстрее 2 с,GET /health/liveвнутри реплики —200, ни один ответ не500
Scenario: Неизвестный токен при остановленной БД
- WHEN PostgreSQL остановлен и приходит запрос с неизвестным токеном
- THEN ответ
503, а не200
Scenario: Балансировщик исключает все реплики
- WHEN PostgreSQL остановлен дольше времени обнаружения
- THEN статистика LB показывает 0 готовых реплик, а запрос через LB, включая
GET /health/live, получает503 {"error":{"code":"unavailable",...}}безX-Instance-Id - AND после запуска PostgreSQL все реплики снова готовы в LB без перезапуска своих процессов
Requirement: Восстановление без рестарта API
После возвращения PostgreSQL API SHALL восстанавливать обслуживание без перезапуска своего процесса за счёт переподключения пула.
Scenario: PostgreSQL снова запущен
- WHEN сервис
postgresзапущен после остановки - THEN в течение 30 с
/health/readyотвечает200, а прежний токен читает свои данные
Requirement: Ограниченный пул соединений
Каждый процесс API SHALL держать не больше заданного числа соединений с PostgreSQL. Запрос, не получивший соединение за заданное время, SHALL получать 503 и SHALL NOT ждать бесконечно. Все SQL-запросы SHALL быть параметризованными.
Scenario: Пул исчерпан
- WHEN все соединения пула заняты и приходит запрос, требующий БД
- THEN ответ
503 unavailableза время ожидания соединения