#!/bin/sh # Общая идемпотентность: параллельные POST с одним ключом через разные реплики, затем то же # в момент отказа реплики и сверка сообщений с ключами в БД. Результат: evidence/level4/idempotency.txt # # Запуск из любого каталога при поднятом стенде с двумя репликами: sh scripts/idempotency-evidence.sh # Нужны Go и Python. Реплики на время проверки останавливаются, затем восстанавливаются. # Файл результата перезаписывается. Код выхода: 0, только если пройдены все три шага. # -e: выйти при ошибке команды; -u: считать ошибкой неизвестную переменную. set -eu # Перейти в корень проекта: все пути ниже указаны относительно него. cd "$(dirname "$0")/.." # Общие функции: compose и git_state (текущий коммит). . scripts/lb-lib.sh OUT=evidence/level4/idempotency.txt # Порт берём из .env, если он там задан (при нескольких значениях последнее), иначе 8080. PORT=$(sed -n 's/^API_PUBLISH_PORT=//p' .env | tail -n 1) BASE_URL=${BASE_URL:-http://localhost:${PORT:-8080}} # Основная логика; весь её вывод попадает в файл результата (см. конец скрипта). # Вызов через || отключает set -e внутри run, поэтому каждый шаг сам возвращает ошибку. run() { # Шапка доказательства: время и версия кода. echo "# Идемпотентность $(date -u +%Y-%m-%dT%H:%M:%SZ), commit $(git_state)" # Шаг 1. Гонка без отказов: тест app/e2e шлёт одинаковые запросы через обе реплики. echo "## параллельно через обе реплики (20 раундов по 16 запросов, 3 прогона)" for i in 1 2 3; do # Вывод сохраняем в переменную: в конвейере с grep код выхода go test был бы потерян. e2e_status=0 e2e_log=$(cd app && E2E_BASE_URL="$BASE_URL" go test -count=1 -v ./e2e/ 2>&1) || e2e_status=$? # Оставляем только итоги: объём раунда и строки результата теста. echo "$e2e_log" | grep -E 'раундов|^(--- |FAIL)' || true [ "$e2e_status" -eq 0 ] || return 1 done # Шаг 2. Та же гонка в момент отказа реплики, с повтором неподтверждённых запросов. echo "## параллельно в момент отказа реплики" python3 scripts/idempotency-under-failure.py || return 1 # Шаг 3. Независимая проверка по БД для сообщений шага 2 (текст начинается с parallel-). # Проверять повторы самих ключей бессмысленно: их запрещает PRIMARY KEY таблицы. А вот эти # два нарушения БД не запрещает, поэтому их может создать только ошибка в коде: # первое число — одно и то же сообщение записано в чат больше одного раза (дубль); # второе число — сообщение записано без ключа, то есть мимо защиты от повтора. # Для второго числа берём только последний час: старые ключи удаляются через сутки. echo "## дублей сообщений и сообщений без ключа в БД (должно быть 0 0)" db_check=$(compose exec -T postgres psql -U messenger -d messenger -At -c " select (select count(*) from ( select chat_id, text from messages where text like 'parallel-%' group by 1, 2 having count(*) > 1) d) || ' ' || (select count(*) from messages m where m.text like 'parallel-%' and m.created_at > now() - interval '1 hour' and not exists (select 1 from message_idempotency_keys k where k.message_id = m.id))") || return 1 echo "$db_check" [ "$db_check" = "0 0" ] || return 1 } mkdir -p evidence/level4 status=0 # Код запоминаем, чтобы вывести файл на экран и при неудаче. run > "$OUT" 2>&1 || status=$? cat "$OUT" exit "$status"