Files
mtusi2026lab7/src/migrate.py
T
zemiles 9cc80d2529
Application / app (pull_request) Canceled after 0s
Skeleton contracts / contracts (pull_request) Canceled after 0s
ЛР 7 — БПИ2303 — Лазарев — на 3
Перенесена реализация lab6; бизнес-API без изменений, транспорт — HTTPS.

- Внешний HTTPS (public-ca) на 127.0.0.1:8443; HSTS, TLS >= 1.2.
- Обязательное mTLS LB -> каждая API-реплика: API проверяет цепочку
  internal-ca и SAN клиента (allowlist: lb); health только на 127.0.0.1.
- TLS с проверкой сервера ко всем зависимостям: PostgreSQL verify-full
  (pg_hba только hostssl), HTTPS S3, AMQPS, OTLP/HTTPS с client cert,
  mTLS Collector -> Prometheus/Loki/Tempo, Grafana -> datasources, scrape.
- OpenBao 2.7.2 не в dev-mode: Raft на volume, init/unseal оператором,
  auth/cert с ролью и policy на сервис, TTL 15 мин + renew/re-login.
- Отдельные роли PostgreSQL с грантами по таблицам; разные ключи S3 и
  пользователи брокера выдаются из OpenBao.
- Argon2id (m=19 MiB, t=2, p=1, замер на стенде) и rehash при входе.
- Случайный X-Instance-Id; hardening контейнеров (non-root, cap_drop ALL,
  no-new-privileges, read-only, лимиты); TCP_NODELAY на сокете API.
- Модель угроз, trust matrix, отрицательные тесты TLS/mTLS, API, OpenBao,
  hardening; evidence, в т.ч. прогон из чистого clone.
2026-11-18 23:59:35 +03:00

67 lines
3.2 KiB
Python
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
#!/usr/bin/env python3
"""Однократное применение миграций и прав (compose-сервис `migrate`).
Запускается ОДИН раз до старта/замены API-реплик, а не каждой репликой. Миграции — под
pg_advisory_lock: параллельный повторный запуск не устроит гонку; каждый файл в своей транзакции.
Lab7:
* job подключается как суперпользователь postgres по TLS verify-full; пароль — из OpenBao
(kv/messenger/migrate, cert auth identity `migrate`), не из файла;
* создаёт/обновляет сервисные роли api_svc, worker_svc, relay_svc, janitor_svc, ops_svc
(LOGIN, пароль из того же KV; NOSUPERUSER NOCREATEDB NOCREATEROLE NOINHERIT,
ограничение числа соединений) — повторный запуск синхронизирует пароль (ротация);
* применяет migrations/security/grants.sql (REVOKE ALL -> точные GRANT).
"""
import logging
import sys
from pathlib import Path
from psycopg import sql
import telemetry
import vault
from server import MIGRATIONS_DIR, STORE
log = logging.getLogger("messenger.migrate")
ROLES = { # роль -> (поле KV с паролем, CONNECTION LIMIT)
"api_svc": ("DB_API_PASSWORD", 40),
"worker_svc": ("DB_WORKER_PASSWORD", 30),
"relay_svc": ("DB_RELAY_PASSWORD", 10),
"janitor_svc": ("DB_JANITOR_PASSWORD", 5),
"ops_svc": ("DB_OPS_PASSWORD", 3),
}
def ensure_roles(conn):
for role, (field, limit) in ROLES.items():
password = vault.secret(field)
exists = conn.execute("SELECT 1 FROM pg_roles WHERE rolname = %s", (role,)).fetchone()
verb = "ALTER" if exists else "CREATE"
conn.execute(sql.SQL("{} ROLE {} LOGIN NOSUPERUSER NOCREATEDB NOCREATEROLE NOINHERIT NOREPLICATION "
"NOBYPASSRLS CONNECTION LIMIT {} PASSWORD {}").format(
sql.SQL(verb), sql.Identifier(role), sql.Literal(limit), sql.Literal(password)))
# Без лишних параметров сессии, которые могла бы выставить роль сама.
conn.execute(sql.SQL("ALTER ROLE {} SET statement_timeout = '5s'").format(sql.Identifier(role)))
log.info("db role %s %s", role, "updated" if exists else "created", extra={"event": "db.role"})
def main():
telemetry.configure_logging() # короткоживущий job: только JSON-лог в stdout, без экспорта
STORE.open()
try:
before = STORE.pending_migrations(MIGRATIONS_DIR)
STORE.migrate(MIGRATIONS_DIR)
grants = (Path(MIGRATIONS_DIR) / "security" / "grants.sql").read_text(encoding="utf-8")
with STORE.pool.connection() as conn:
with conn.transaction():
ensure_roles(conn)
conn.execute(grants)
log.info("migrations done; applied now: %s; roles and grants synced", ", ".join(before) or "nothing")
finally:
STORE.close()
if __name__ == "__main__":
sys.exit(main())