- upload возвращает 202 после записи оригинала в staging/ и одной транзакции attachments + jobs + outbox - relay outbox → RabbitMQ (quorum-очередь, publisher confirms) в каждой реплике API; sweeper возвращает работу с истёкшей арендой - worker: аренда с fencing-токеном, варианты thumbnail/crop/optimized (sharp), retry с backoff и jitter, реестр failed, replay с аудитом, reprocess новой версией pipeline - reconciler дочищает staging/ и variants/ - сценарии уровней 3–4, fault-injection трека 2 (14 сценариев, инварианты I1–I6), evidence и REPORT.md
52 lines
4.1 KiB
Bash
Executable File
52 lines
4.1 KiB
Bash
Executable File
#!/bin/sh
|
|
# Проверка приватности bucket и минимальных прав вне API (уровень 4). Ничего не меняет, кроме
|
|
# временного объекта probe/* (создаётся и сразу удаляется ключом api) — и повторного запуска s3-init.
|
|
set -eu
|
|
cd "$(dirname "$0")/.."
|
|
fail=0
|
|
expect() { # описание, ожидаемое, фактическое
|
|
if [ "$2" = "$3" ]; then echo "PASS $1: $3"; else echo "FAIL $1: ожидалось $2, получено $3"; fail=1; fi
|
|
}
|
|
key=$(docker compose exec -T postgres psql -U messenger -d messenger -tAc "SELECT object_key FROM attachments WHERE state = 'ready' LIMIT 1")
|
|
[ -n "$key" ] || { echo "нужно хотя бы одно вложение: сначала make test"; exit 2; }
|
|
bucket=$(docker compose exec -T api printenv S3_BUCKET)
|
|
|
|
# 1. Анонимный доступ напрямую к S3-шлюзу из сети backend (минуя API): без подписи — 403.
|
|
anon() { docker compose exec -T api node -e 'fetch(process.argv[1], { method: process.argv[2], body: process.argv[2] === "PUT" ? "x" : undefined }).then((r) => console.log(r.status), () => console.log("error"))' "$@"; }
|
|
expect "анонимный GET объекта" 403 "$(anon "http://s3:9000/$bucket/$key" GET)"
|
|
expect "анонимный LIST bucket" 403 "$(anon "http://s3:9000/$bucket?list-type=2" GET)"
|
|
expect "анонимный PUT объекта" 403 "$(anon "http://s3:9000/$bucket/originals/anonymous" PUT)"
|
|
|
|
# 2. Ключи api и reconciler: только свой bucket и только нужные действия.
|
|
for svc in api reconciler; do
|
|
docker compose exec -T "$svc" node --input-type=module - "$key" < student-tests/s3_probe.mjs | while read -r line; do echo " $svc $line"; done
|
|
done
|
|
probe() { docker compose exec -T "$1" node --input-type=module - "$key" < student-tests/s3_probe.mjs | awk -v op="$2: " 'index($0, op) == 1 {split(substr($0, length(op) + 1), w, " "); print w[1]}'; }
|
|
expect "api GetObject" allowed "$(probe api 'GetObject own bucket')"
|
|
expect "api ListObjectsV2 (не нужен API)" denied "$(probe api 'ListObjectsV2 own bucket')"
|
|
expect "api CreateBucket" denied "$(probe api 'CreateBucket other')"
|
|
expect "api PutObject в чужой bucket" denied "$(probe api 'PutObject other bucket')"
|
|
expect "reconciler ListObjectsV2" allowed "$(probe reconciler 'ListObjectsV2 own bucket')"
|
|
expect "reconciler CreateBucket" denied "$(probe reconciler 'CreateBucket other')"
|
|
|
|
# 3. Внутренние интерфейсы SeaweedFS (filer/master/volume без подписи S3) недоступны из API: другая сеть.
|
|
for port in 8888 9333 8080; do
|
|
if docker compose exec -T api wget -T 2 -q -O /dev/null "http://seaweedfs:$port/" 2>/dev/null; then r=reachable; else r=unreachable; fi
|
|
expect "seaweedfs:$port из контейнера api" unreachable "$r"
|
|
done
|
|
# Не только DNS: и по IP в сети storage маршрута из backend нет.
|
|
ip=$(docker inspect -f '{{range .NetworkSettings.Networks}}{{.IPAddress}}{{end}}' "$(docker compose ps -q seaweedfs)")
|
|
if docker compose exec -T api wget -T 2 -q -O /dev/null "http://$ip:8888/" 2>/dev/null; then r=reachable; else r=unreachable; fi
|
|
expect "filer по IP $ip:8888 из контейнера api" unreachable "$r"
|
|
|
|
# 4. На хост опубликован только LB (API и статистика HAProxy на 127.0.0.1); S3 и консоли — нет.
|
|
published=$(for id in $(docker compose ps -q); do
|
|
[ -n "$(docker port "$id")" ] && docker inspect -f '{{index .Config.Labels "com.docker.compose.service"}}' "$id"
|
|
done | sort -u | tr '\n' ' ')
|
|
expect "сервисы с опубликованными портами" "lb " "$published"
|
|
|
|
# 5. Bootstrap идемпотентен: повторный s3-init не создаёт и не ломает bucket.
|
|
expect "повторный s3-init" "bucket $bucket: exists" "$(docker compose run --rm -T s3-init 2>/dev/null | tail -1)"
|
|
|
|
[ "$fail" = 0 ] && echo "PASS: bucket приватен, права минимальны, внутренние порты закрыты" || exit 1
|