Files
mtusi2026lab6/src/app/s3_bootstrap.py
T

86 lines
4.0 KiB
Python

"""Идемпотентный bootstrap S3: python -m app.s3_bootstrap (one-shot сервис s3-init при каждом `docker compose up`).
1) bucket создаётся администратором, если его ещё нет (повтор ничего не меняет);
2) проверяется, что анонимный запрос к bucket отклоняется (private);
3) проверяется, что отдельный ключ API (права только на этот bucket) может писать/читать/удалять и НЕ может создавать bucket.
Ключи читаются из файлов секретов; в вывод не попадают. Код выхода != 0, если любая проверка не пройдена.
"""
import asyncio
import os
import sys
import time
import urllib.error
import urllib.request
from aiobotocore.config import AioConfig
from aiobotocore.session import get_session
from botocore.exceptions import ClientError
from . import config
def secret(name):
path = os.environ.get(name + "_FILE")
with open(path, encoding="utf-8") as fh:
return fh.read().strip()
def client(session, access, secret_key):
return session.create_client("s3", endpoint_url=config.S3_ENDPOINT, region_name=config.S3_REGION, aws_access_key_id=access,
aws_secret_access_key=secret_key,
config=AioConfig(connect_timeout=3, read_timeout=10, retries={"max_attempts": 1},
s3={"addressing_style": "path"}))
async def main():
bucket = config.S3_BUCKET
session = get_session()
deadline = time.time() + 60
async with client(session, secret("S3_ADMIN_ACCESS_KEY"), secret("S3_ADMIN_SECRET_KEY")) as admin:
while True:
try:
await admin.list_buckets()
break
except Exception as exc:
if time.time() > deadline:
print("S3 недоступен:", type(exc).__name__)
return 1
await asyncio.sleep(1)
try:
await admin.head_bucket(Bucket=bucket)
print("bucket %s уже существует" % bucket)
except ClientError:
await admin.create_bucket(Bucket=bucket)
print("bucket %s создан" % bucket)
# приватность: запрос без подписи отклоняется
try:
urllib.request.urlopen("%s/%s/" % (config.S3_ENDPOINT, bucket), timeout=5)
print("ОШИБКА: bucket доступен анонимно")
return 2
except urllib.error.HTTPError as exc:
if exc.code not in (401, 403):
print("ОШИБКА: анонимный доступ вернул %d, ожидался 401/403" % exc.code)
return 2
print("анонимный доступ запрещён (HTTP %d)" % exc.code)
# ключ API: рабочие права на bucket, нет прав администратора
async with client(session, config.S3_ACCESS_KEY, config.S3_SECRET_KEY) as api:
key = "bootstrap-check/%d" % int(time.time())
await api.put_object(Bucket=bucket, Key=key, Body=b"ok")
got = await (await api.get_object(Bucket=bucket, Key=key))["Body"].read()
await api.delete_object(Bucket=bucket, Key=key)
if got != b"ok":
print("ОШИБКА: чтение/запись ключом API")
return 3
try:
await api.create_bucket(Bucket="not-allowed-" + str(int(time.time())))
print("ОШИБКА: ключ API смог создать bucket (избыточные права)")
return 4
except ClientError as exc:
print("ключ API ограничен одним bucket (create_bucket отклонён: %s)" % exc.response["Error"]["Code"])
print("bootstrap завершён")
return 0
if __name__ == "__main__":
sys.exit(asyncio.run(main()))