Files
mtusi2026lab5/src/main.ts
T
celisandClaude Opus 5.5 51161b2579 Реализовать лабораторную 5: очередь RabbitMQ, worker и outbox
- upload возвращает 202 после записи оригинала в staging/ и одной
  транзакции attachments + jobs + outbox
- relay outbox → RabbitMQ (quorum-очередь, publisher confirms) в каждой
  реплике API; sweeper возвращает работу с истёкшей арендой
- worker: аренда с fencing-токеном, варианты thumbnail/crop/optimized
  (sharp), retry с backoff и jitter, реестр failed, replay с аудитом,
  reprocess новой версией pipeline
- reconciler дочищает staging/ и variants/
- сценарии уровней 3–4, fault-injection трека 2 (14 сценариев,
  инварианты I1–I6), evidence и REPORT.md

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-10-31 00:21:12 +03:00

85 lines
4.4 KiB
TypeScript
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
// Точка входа мессенджера (лабораторная 5).
// Реплика не хранит состояния: пользователи, сессии, чаты, сообщения, ключи идемпотентности, метаданные
// вложений и задания (jobs, outbox) — в PostgreSQL, байты — в S3, поэтому запрос может обслужить любая реплика.
// node src/main.ts — HTTP-сервер + relay outbox → RabbitMQ (src/jobs/relay.ts)
// node src/main.ts worker — обработка изображений из очереди (src/jobs/worker.ts, сервис worker)
// node src/main.ts jobs … — операторские команды: failed | replay <id> | reprocess --version=N
// node src/main.ts migrate — однократный прогон миграций (сервис migrate)
// node src/main.ts s3-init — идемпотентное создание приватного bucket ключом администратора (сервис s3-init)
// node src/main.ts reconcile — сверка БД ↔ S3, параметры в src/reconcile.ts (сервис reconciler)
import { createServer } from 'node:http';
import { setTimeout as sleep } from 'node:timers/promises';
import { createApp } from './app.ts';
import { envInt, loadConfig, s3Config, secret } from './config.ts';
import { createPool, migrate } from './db.ts';
import { adminCommand } from './jobs/admin.ts';
import { createPublisher } from './jobs/broker.ts';
import { startRelay } from './jobs/relay.ts';
import { runWorker } from './jobs/worker.ts';
import { reconcileCommand } from './reconcile.ts';
import { createStorage } from './storage/s3.ts';
async function serve(): Promise<void> {
const config = loadConfig();
const db = createPool(config.databaseUrl, config.dbPoolMax);
const relay = startRelay(db, createPublisher(config.brokerUrl), config.jobs);
const app = createApp(db, createStorage(config.s3), config, relay);
const server = createServer(app.handle);
server.headersTimeout = 5000;
server.requestTimeout = 60000; // 10 MiB на медленном канале; grace reconciler-а (15 мин) заведомо больше
server.keepAliveTimeout = 60000;
server.listen(config.port, config.host, () =>
console.log(`реплика ${config.instanceId} слушает :${config.port}, пул БД ${config.dbPoolMax}`));
// Graceful shutdown: сначала readiness → 503 и пауза drain, пока LB не исключит реплику (fall × inter),
// при этом запросы ещё обслуживаются; затем перестаём принимать соединения и дожидаемся текущих запросов.
const stop = (signal: string) => {
if (!app.state.ready) return;
console.log(`${signal}: readiness=503, drain ${config.shutdownDrainMs} мс`);
app.state.ready = false;
relay.stop();
setTimeout(() => {
server.close(async () => {
await db.end();
console.log('остановлена');
process.exit(0);
});
server.closeIdleConnections();
setTimeout(() => process.exit(1), 10000).unref(); // страховка от зависшего запроса
}, config.shutdownDrainMs);
};
process.on('SIGTERM', () => stop('SIGTERM'));
process.on('SIGINT', () => stop('SIGINT'));
}
// S3 может стартовать позже: повторяем до 30 с. Повторный запуск на готовом bucket ничего не меняет.
async function s3Init(): Promise<void> {
const storage = createStorage(s3Config());
for (let attempt = 1; ; attempt++) {
try {
console.log(`bucket ${storage.bucket}: ${await storage.createBucket()}`);
return;
} catch (err) {
if (attempt >= 30) throw err;
await sleep(1000);
}
}
}
const command = process.argv[2];
if (command === 'migrate') {
await migrate(secret('DATABASE_URL'));
} else if (command === 's3-init') {
await s3Init();
} else if (command === 'worker') {
await runWorker();
} else if (command === 'jobs') {
const db = createPool(secret('DATABASE_URL'), 2);
await adminCommand(db, process.argv.slice(3));
await db.end();
} else if (command === 'reconcile') {
await reconcileCommand(process.argv.slice(3), envInt('RECONCILE_GRACE_SECONDS', 900), envInt('STAGING_RETENTION_SECONDS', 86400));
} else {
await serve();
}