fix: address attachments verify findings

- keep one upload body in memory: BytesIO + getvalue() without copy,
  fixed glibc mmap threshold in the image (no realloc copy on growth)
- stop PNG inflate at expected size + 1 byte
- reject filename that is not valid UTF-8 after percent-decoding (400)
- failure stand: env limit variables do not change attachment limits;
  history with attachment_ids while S3 is stopped
- drop dead constants; restate "old image on new schema" scenario

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
2026-10-21 02:16:49 +03:00
co-authored by Claude Opus 5.5
parent 8dc925e8ca
commit dba40bc325
23 changed files with 398 additions and 47 deletions
+1
View File
@@ -31,6 +31,7 @@ DOMAIN_ERRORS: dict[type[exceptions.DomainError], tuple[int, ErrorCode]] = {
exceptions.AttachmentNotFound: (404, ErrorCode.NOT_FOUND),
exceptions.InvalidChatMembers: (400, ErrorCode.INVALID_REQUEST),
exceptions.InvalidCursor: (400, ErrorCode.INVALID_REQUEST),
exceptions.InvalidFilename: (400, ErrorCode.INVALID_REQUEST),
exceptions.UploadInterrupted: (400, ErrorCode.INVALID_REQUEST),
exceptions.PayloadTooLarge: (413, ErrorCode.PAYLOAD_TOO_LARGE),
exceptions.UnsupportedMediaType: (
+29
View File
@@ -8,6 +8,7 @@
from collections.abc import AsyncIterator
from typing import Annotated, Literal
from urllib.parse import unquote_to_bytes
from fastapi import APIRouter, Query, Request
from fastapi.responses import StreamingResponse
@@ -25,6 +26,9 @@ from src.utils.constants import (
router = APIRouter(tags=["attachments"])
# имя параметра имени файла в строке запроса, байтами: проверка кодировки
_FILENAME_PARAM = b"filename"
_BINARY = {"schema": {"type": "string", "format": "binary"}}
# тело загрузки — сырые байты, параметра тела у ручки нет (FastAPI его не
# читает): схему для /openapi.json и /docs задаём как в контракте
@@ -59,6 +63,28 @@ def _media_type(request: Request) -> str | None:
return value.split(";", 1)[0].strip().lower() or None
def _check_filename_encoding(request: Request) -> None:
"""`filename` в строке запроса — строгий UTF-8, иначе 400.
Starlette декодирует процент-коды с заменой неверных байтов на
U+FFFD, и `a%FFb.png` прошёл бы как `a\\ufffdb.png`. Здесь те же пары
(`&`, `=`, `+` — пробел), что у `parse_qsl`, но байты значения
проверяются строго: байт вне ASCII в строке запроса (URI его не
допускает) или неверная последовательность UTF-8 — `InvalidFilename`.
Для принятых значений результат совпадает с разбором Starlette.
"""
for pair in request.scope["query_string"].split(b"&"):
name, _, value = pair.partition(b"=")
if unquote_to_bytes(name.replace(b"+", b" ")) != _FILENAME_PARAM:
continue
if not value.isascii():
raise exceptions.InvalidFilename
try:
unquote_to_bytes(value.replace(b"+", b" ")).decode("utf-8")
except UnicodeDecodeError as e:
raise exceptions.InvalidFilename from e
def _content_length(request: Request) -> int | None:
value = request.headers.get("content-length")
return int(value) if value is not None and value.isdigit() else None
@@ -91,7 +117,10 @@ async def upload_attachment(
Тело не читается, пока не пройдены вход, параметры, членство,
`Content-Type` и `Content-Length` (спек «Порядок проверок загрузки»).
Кодировка `filename` проверяется здесь, до членства: это 400
параметров, как и остальные правила имени.
"""
_check_filename_encoding(request)
attachment = await attachments.upload(
chat_id=chat_id,
owner_id=user.id,