Перенесена реализация lab6; бизнес-API без изменений, транспорт — HTTPS. - Внешний HTTPS (public-ca) на 127.0.0.1:8443; HSTS, TLS >= 1.2. - Обязательное mTLS LB -> каждая API-реплика: API проверяет цепочку internal-ca и SAN клиента (allowlist: lb); health только на 127.0.0.1. - TLS с проверкой сервера ко всем зависимостям: PostgreSQL verify-full (pg_hba только hostssl), HTTPS S3, AMQPS, OTLP/HTTPS с client cert, mTLS Collector -> Prometheus/Loki/Tempo, Grafana -> datasources, scrape. - OpenBao 2.7.2 не в dev-mode: Raft на volume, init/unseal оператором, auth/cert с ролью и policy на сервис, TTL 15 мин + renew/re-login. - Отдельные роли PostgreSQL с грантами по таблицам; разные ключи S3 и пользователи брокера выдаются из OpenBao. - Argon2id (m=19 MiB, t=2, p=1, замер на стенде) и rehash при входе. - Случайный X-Instance-Id; hardening контейнеров (non-root, cap_drop ALL, no-new-privileges, read-only, лимиты); TCP_NODELAY на сокете API. - Модель угроз, trust matrix, отрицательные тесты TLS/mTLS, API, OpenBao, hardening; evidence, в т.ч. прогон из чистого clone.
67 lines
3.2 KiB
Python
67 lines
3.2 KiB
Python
#!/usr/bin/env python3
|
||
"""Однократное применение миграций и прав (compose-сервис `migrate`).
|
||
|
||
Запускается ОДИН раз до старта/замены API-реплик, а не каждой репликой. Миграции — под
|
||
pg_advisory_lock: параллельный повторный запуск не устроит гонку; каждый файл в своей транзакции.
|
||
|
||
Lab7:
|
||
* job подключается как суперпользователь postgres по TLS verify-full; пароль — из OpenBao
|
||
(kv/messenger/migrate, cert auth identity `migrate`), не из файла;
|
||
* создаёт/обновляет сервисные роли api_svc, worker_svc, relay_svc, janitor_svc, ops_svc
|
||
(LOGIN, пароль из того же KV; NOSUPERUSER NOCREATEDB NOCREATEROLE NOINHERIT,
|
||
ограничение числа соединений) — повторный запуск синхронизирует пароль (ротация);
|
||
* применяет migrations/security/grants.sql (REVOKE ALL -> точные GRANT).
|
||
"""
|
||
import logging
|
||
import sys
|
||
from pathlib import Path
|
||
|
||
from psycopg import sql
|
||
|
||
import telemetry
|
||
import vault
|
||
from server import MIGRATIONS_DIR, STORE
|
||
|
||
log = logging.getLogger("messenger.migrate")
|
||
|
||
ROLES = { # роль -> (поле KV с паролем, CONNECTION LIMIT)
|
||
"api_svc": ("DB_API_PASSWORD", 40),
|
||
"worker_svc": ("DB_WORKER_PASSWORD", 30),
|
||
"relay_svc": ("DB_RELAY_PASSWORD", 10),
|
||
"janitor_svc": ("DB_JANITOR_PASSWORD", 5),
|
||
"ops_svc": ("DB_OPS_PASSWORD", 3),
|
||
}
|
||
|
||
|
||
def ensure_roles(conn):
|
||
for role, (field, limit) in ROLES.items():
|
||
password = vault.secret(field)
|
||
exists = conn.execute("SELECT 1 FROM pg_roles WHERE rolname = %s", (role,)).fetchone()
|
||
verb = "ALTER" if exists else "CREATE"
|
||
conn.execute(sql.SQL("{} ROLE {} LOGIN NOSUPERUSER NOCREATEDB NOCREATEROLE NOINHERIT NOREPLICATION "
|
||
"NOBYPASSRLS CONNECTION LIMIT {} PASSWORD {}").format(
|
||
sql.SQL(verb), sql.Identifier(role), sql.Literal(limit), sql.Literal(password)))
|
||
# Без лишних параметров сессии, которые могла бы выставить роль сама.
|
||
conn.execute(sql.SQL("ALTER ROLE {} SET statement_timeout = '5s'").format(sql.Identifier(role)))
|
||
log.info("db role %s %s", role, "updated" if exists else "created", extra={"event": "db.role"})
|
||
|
||
|
||
def main():
|
||
telemetry.configure_logging() # короткоживущий job: только JSON-лог в stdout, без экспорта
|
||
STORE.open()
|
||
try:
|
||
before = STORE.pending_migrations(MIGRATIONS_DIR)
|
||
STORE.migrate(MIGRATIONS_DIR)
|
||
grants = (Path(MIGRATIONS_DIR) / "security" / "grants.sql").read_text(encoding="utf-8")
|
||
with STORE.pool.connection() as conn:
|
||
with conn.transaction():
|
||
ensure_roles(conn)
|
||
conn.execute(grants)
|
||
log.info("migrations done; applied now: %s; roles and grants synced", ", ".join(before) or "nothing")
|
||
finally:
|
||
STORE.close()
|
||
|
||
|
||
if __name__ == "__main__":
|
||
sys.exit(main())
|