forked from mtusi2026/mtusi2026lab5
- upload возвращает 202 после записи оригинала в staging/ и одной транзакции attachments + jobs + outbox - relay outbox → RabbitMQ (quorum-очередь, publisher confirms) в каждой реплике API; sweeper возвращает работу с истёкшей арендой - worker: аренда с fencing-токеном, варианты thumbnail/crop/optimized (sharp), retry с backoff и jitter, реестр failed, replay с аудитом, reprocess новой версией pipeline - reconciler дочищает staging/ и variants/ - сценарии уровней 3–4, fault-injection трека 2 (14 сценариев, инварианты I1–I6), evidence и REPORT.md Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
28 lines
2.1 KiB
TypeScript
28 lines
2.1 KiB
TypeScript
// Точки внедрения отказов для тестов (трек 2 и уровень 4). Выключены, пока FAILPOINTS не равно 1.
|
||
// Срабатывает только для вложения с именем файла failpoint-<точка>[-<N>s].png и ровно один раз на вложение
|
||
// (отметка в failpoint_hits), поэтому перезапущенный процесс доделывает работу, а не падает по кругу.
|
||
// failpoint-<точка>.png — немедленный выход с кодом 137: ни finally, ни ack, ни ROLLBACK — соединения с БД
|
||
// и брокером рвёт ядро, как при реальном падении. Не SIGKILL себе: node в контейнере —
|
||
// PID 1, а сигналы без обработчика, посланные init изнутри его namespace, ядро игнорирует;
|
||
// failpoint-<точка>-<N>s.png — пауза N секунд: процесс жив, но «завис» (проверка аренды и fencing).
|
||
// Точки: api_after_staging, api_after_commit, relay_after_publish, worker_after_claim, worker_after_side_effect,
|
||
// worker_after_commit.
|
||
import { setTimeout as sleep } from 'node:timers/promises';
|
||
import type { Pool } from 'pg';
|
||
|
||
const enabled = process.env.FAILPOINTS === '1';
|
||
|
||
export async function failpoint(db: Pool, name: string, attachmentId: string, filename: string): Promise<void> {
|
||
const m = enabled ? /^failpoint-([a-z_]+)(?:-(\d+)s)?\.png$/.exec(filename) : null;
|
||
if (!m || m[1] !== name) return;
|
||
const hit = await db.query('INSERT INTO failpoint_hits (name, attachment_id) VALUES ($1, $2) ON CONFLICT DO NOTHING', [name, attachmentId]);
|
||
if (!hit.rowCount) return;
|
||
if (m[2]) {
|
||
console.error(`failpoint ${name}: пауза ${m[2]} с`);
|
||
await sleep(Number(m[2]) * 1000);
|
||
return;
|
||
}
|
||
console.error(`failpoint ${name}: аварийное завершение процесса`);
|
||
process.exit(137);
|
||
}
|