forked from mtusi2026/mtusi2026lab6
Перенесена реализация lab5 (API x2 за HAProxy, PostgreSQL, SeaweedFS S3, RabbitMQ, relay outbox, worker x2, janitor) без изменения бизнес-API. Наблюдаемость: - OpenTelemetry SDK в API, relay, worker, janitor: traces, metrics, logs по OTLP/HTTP; структурные JSON-логи с trace_id/span_id - OTel Collector (memory_limiter, batch, ограниченные очереди и retry), Prometheus (метрики, alert rules), Loki (логи), Tempo (трассы), Grafana с provisioning datasources и dashboard - W3C trace context API -> outbox -> RabbitMQ -> worker (parent-child, включая retry); метрики очереди, пула БД, загрузки worker, CPU/RAM - SLI/SLO, 10 alert rules с unit-тестами promtool и runbooks - инциденты: остановка worker, блокировка БД, отказ telemetry backend; по наблюдениям исправлен простой worker в цикле AMQP (разбор x2.4)
41 lines
2.8 KiB
SQL
41 lines
2.8 KiB
SQL
-- Lab4: метаданные вложений (PostgreSQL) отдельно от байтов (приватный S3-bucket).
|
|
-- Expand-only: только новые таблицы, код lab3 продолжает работать на этой схеме.
|
|
--
|
|
-- Жизненный цикл строки attachments:
|
|
-- pending — намерение записано ДО S3 PUT (известны размер, SHA-256, object_key);
|
|
-- ready — объект в S3 подтверждён, строка видна API и может быть прикреплена.
|
|
-- Если процесс упал/БД отказала между PUT и переводом в ready, строка остаётся pending.
|
|
-- Её находит janitor (src/janitor.py) по created_at старше grace period и удаляет
|
|
-- сначала объект в S3, затем строку. Поэтому в S3 нет объектов, о которых не знает БД.
|
|
CREATE TABLE attachments (
|
|
id uuid PRIMARY KEY,
|
|
chat_id uuid NOT NULL REFERENCES chats(id),
|
|
owner_id uuid NOT NULL REFERENCES users(id),
|
|
filename text NOT NULL CHECK (char_length(filename) BETWEEN 1 AND 255),
|
|
content_type text NOT NULL CHECK (content_type IN ('image/png', 'image/jpeg')),
|
|
size_bytes bigint NOT NULL CHECK (size_bytes BETWEEN 1 AND 10485760),
|
|
sha256 text NOT NULL CHECK (sha256 ~ '^[a-f0-9]{64}$'),
|
|
width integer NOT NULL CHECK (width > 0),
|
|
height integer NOT NULL CHECK (height > 0),
|
|
-- Ключ назначает сервер (случайный), filename в нём не участвует.
|
|
object_key text NOT NULL UNIQUE,
|
|
status text NOT NULL CHECK (status IN ('pending', 'ready')),
|
|
created_at timestamptz NOT NULL,
|
|
updated_at timestamptz NOT NULL
|
|
);
|
|
CREATE INDEX attachments_chat_idx ON attachments (chat_id);
|
|
-- Janitor ищет только «зависшие» pending: частичный индекс маленький.
|
|
CREATE INDEX attachments_pending_idx ON attachments (created_at) WHERE status = 'pending';
|
|
|
|
-- Ссылки сообщения на вложения (порядок как в запросе).
|
|
CREATE TABLE message_attachments (
|
|
message_id uuid NOT NULL REFERENCES messages(id),
|
|
attachment_id uuid NOT NULL REFERENCES attachments(id),
|
|
position integer NOT NULL,
|
|
PRIMARY KEY (message_id, attachment_id)
|
|
);
|
|
CREATE INDEX message_attachments_attachment_idx ON message_attachments (attachment_id);
|
|
|
|
-- Отпечаток тела в ключе идемпотентности уже включает attachment_ids (= [] для lab3),
|
|
-- поэтому существующие ключи остаются валидными без пересчёта.
|