forked from mtusi2026/mtusi2026lab4
Перенос lab3 и вложения в приватном S3 (SeaweedFS 4.50).
- POST /chats/{id}/attachments: потоковый приём PNG/JPEG в безымянный
временный файл, SHA-256 на лету, лимиты 10 MiB / 40 Мпикс до чтения
и декодирования, проверка MIME по содержимому, валидация filename.
- Порядок записи pending -> S3 PUT -> ready с компенсацией; janitor
сверяет БД и bucket (dry-run, grace period, advisory lock).
- GET /attachments/{id} и /content только участникам чата, без redirect;
attachment_ids в сообщениях с проверкой принадлежности чату.
- Отдельные S3-ключи api/janitor/admin с ограниченными правами,
идемпотентный bootstrap bucket, служебные порты SeaweedFS закрыты.
- Ограничение параллельных S3 PUT и MALLOC_ARENA_MAX: пик RSS API
178-189 -> 95-102 MiB; лимиты памяти и restart для SeaweedFS после OOM.
- Тесты уровня 4 (негативные, failover вложений, отказы S3/БД, память)
и доказательства в evidence/, заполнен REPORT.md.
56 lines
3.0 KiB
Bash
56 lines
3.0 KiB
Bash
# Copy to .env for your LOCAL synthetic test environment; never commit .env.
|
||
# scripts/init-secrets.sh делает это сам и создаёт файлы в secrets/ (Docker secrets).
|
||
APP_HOST=0.0.0.0
|
||
APP_PORT=8080
|
||
APP_ENV=lab
|
||
SESSION_TTL_SECONDS=3600
|
||
# Пароль БД НЕ задаётся здесь: он в файле secrets/postgres_password (Docker secret),
|
||
# в контейнерах виден как /run/secrets/postgres_password (POSTGRES_PASSWORD_FILE).
|
||
# Вместо DATABASE_URL_FILE из skeleton используется POSTGRES_* + POSTGRES_PASSWORD_FILE;
|
||
# приложение понимает и DATABASE_URL_FILE (см. REPORT.md).
|
||
POSTGRES_DB=messenger
|
||
POSTGRES_USER=messenger
|
||
# Сессии хранятся в PostgreSQL (lab2), Redis/Valkey не используется:
|
||
SESSION_STORE=postgres
|
||
API_REPLICAS=2
|
||
IDEMPOTENCY_TTL_SECONDS=86400
|
||
DB_POOL_SIZE=10
|
||
# Graceful shutdown реплики: пауза с ready=503 и лимит на дообслуживание запросов.
|
||
DRAIN_SECONDS=3
|
||
SHUTDOWN_TIMEOUT_SECONDS=10
|
||
LB_PORT=8080
|
||
APP_VERSION=1
|
||
# Защита от OOM при шторме входов: одновременных scrypt на реплику и ожидание слота (с).
|
||
PASSWORD_HASH_CONCURRENCY=2
|
||
PASSWORD_HASH_WAIT_SECONDS=0.5
|
||
# Readiness: фоновый пинг БД (с) и сколько секунд без успешного пинга реплика ещё «готова».
|
||
DB_HEALTH_INTERVAL_SECONDS=1
|
||
READY_STALE_SECONDS=3
|
||
# Попыток POST /auth/sessions за 10 с с одного IP на LB (сверх — 429).
|
||
LOGIN_RATE_LIMIT=20
|
||
|
||
# --- Lab4: S3 (SeaweedFS) и вложения ---
|
||
# S3 API SeaweedFS слушает 8333 (не 9000, как у MinIO); наружу не публикуется.
|
||
S3_ENDPOINT=http://s3:8333
|
||
S3_REGION=us-east-1
|
||
S3_BUCKET=messenger-attachments
|
||
# Ключи API (права только Read+Write на bucket). Значения — в secrets/, здесь только пути.
|
||
S3_ACCESS_KEY_ID_FILE=/run/secrets/s3_api_access_key
|
||
S3_SECRET_ACCESS_KEY_FILE=/run/secrets/s3_api_secret_key
|
||
MAX_UPLOAD_BYTES=10485760
|
||
MAX_IMAGE_PIXELS=40000000
|
||
# Весь приём тела upload, с; одновременных загрузок и JPEG-декодирований на реплику.
|
||
UPLOAD_TIMEOUT_SECONDS=60
|
||
UPLOAD_CONCURRENCY=8
|
||
DECODE_CONCURRENCY=2
|
||
# Одновременных S3 PUT на реплику (~20 MiB RAM каждый), остальные ждут в очереди.
|
||
S3_PUT_CONCURRENCY=3
|
||
S3_CONNECT_TIMEOUT_SECONDS=2
|
||
# < timeout server 10s у LB: на зависший S3 API сам отвечает 503, а не LB 504.
|
||
S3_READ_TIMEOUT_SECONDS=5
|
||
# Janitor: возраст, после которого pending-строка/объект без строки считаются брошенными, и период обхода.
|
||
ATTACHMENT_GRACE_SECONDS=3600
|
||
JANITOR_INTERVAL_SECONDS=300
|
||
# Только для эксперимента отказов (student-tests/consistency_faults.py). В обычной работе 0.
|
||
FAULT_INJECTION=0
|