"""Идемпотентный bootstrap S3: python -m app.s3_bootstrap (one-shot сервис s3-init при каждом `docker compose up`). 1) bucket создаётся администратором, если его ещё нет (повтор ничего не меняет); 2) проверяется, что анонимный запрос к bucket отклоняется (private); 3) проверяется, что отдельный ключ API (права только на этот bucket) может писать/читать/удалять и НЕ может создавать bucket. Ключи читаются из файлов секретов; в вывод не попадают. Код выхода != 0, если любая проверка не пройдена. """ import asyncio import os import sys import time import urllib.error import urllib.request from aiobotocore.config import AioConfig from aiobotocore.session import get_session from botocore.exceptions import ClientError from . import config def secret(name): path = os.environ.get(name + "_FILE") with open(path, encoding="utf-8") as fh: return fh.read().strip() def client(session, access, secret_key): return session.create_client("s3", endpoint_url=config.S3_ENDPOINT, region_name=config.S3_REGION, aws_access_key_id=access, aws_secret_access_key=secret_key, config=AioConfig(connect_timeout=3, read_timeout=10, retries={"max_attempts": 1}, s3={"addressing_style": "path"})) async def main(): bucket = config.S3_BUCKET session = get_session() deadline = time.time() + 60 async with client(session, secret("S3_ADMIN_ACCESS_KEY"), secret("S3_ADMIN_SECRET_KEY")) as admin: while True: try: await admin.list_buckets() break except Exception as exc: if time.time() > deadline: print("S3 недоступен:", type(exc).__name__) return 1 await asyncio.sleep(1) try: await admin.head_bucket(Bucket=bucket) print("bucket %s уже существует" % bucket) except ClientError: await admin.create_bucket(Bucket=bucket) print("bucket %s создан" % bucket) # приватность: запрос без подписи отклоняется try: urllib.request.urlopen("%s/%s/" % (config.S3_ENDPOINT, bucket), timeout=5) print("ОШИБКА: bucket доступен анонимно") return 2 except urllib.error.HTTPError as exc: if exc.code not in (401, 403): print("ОШИБКА: анонимный доступ вернул %d, ожидался 401/403" % exc.code) return 2 print("анонимный доступ запрещён (HTTP %d)" % exc.code) # ключ API: рабочие права на bucket, нет прав администратора async with client(session, config.S3_ACCESS_KEY, config.S3_SECRET_KEY) as api: key = "bootstrap-check/%d" % int(time.time()) await api.put_object(Bucket=bucket, Key=key, Body=b"ok") got = await (await api.get_object(Bucket=bucket, Key=key))["Body"].read() await api.delete_object(Bucket=bucket, Key=key) if got != b"ok": print("ОШИБКА: чтение/запись ключом API") return 3 try: await api.create_bucket(Bucket="not-allowed-" + str(int(time.time()))) print("ОШИБКА: ключ API смог создать bucket (избыточные права)") return 4 except ClientError as exc: print("ключ API ограничен одним bucket (create_bucket отклонён: %s)" % exc.response["Error"]["Code"]) print("bootstrap завершён") return 0 if __name__ == "__main__": sys.exit(asyncio.run(main()))