fix: address attachments verify findings
- keep one upload body in memory: BytesIO + getvalue() without copy, fixed glibc mmap threshold in the image (no realloc copy on growth) - stop PNG inflate at expected size + 1 byte - reject filename that is not valid UTF-8 after percent-decoding (400) - failure stand: env limit variables do not change attachment limits; history with attachment_ids while S3 is stopped - drop dead constants; restate "old image on new schema" scenario Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
@@ -31,6 +31,7 @@ DOMAIN_ERRORS: dict[type[exceptions.DomainError], tuple[int, ErrorCode]] = {
|
||||
exceptions.AttachmentNotFound: (404, ErrorCode.NOT_FOUND),
|
||||
exceptions.InvalidChatMembers: (400, ErrorCode.INVALID_REQUEST),
|
||||
exceptions.InvalidCursor: (400, ErrorCode.INVALID_REQUEST),
|
||||
exceptions.InvalidFilename: (400, ErrorCode.INVALID_REQUEST),
|
||||
exceptions.UploadInterrupted: (400, ErrorCode.INVALID_REQUEST),
|
||||
exceptions.PayloadTooLarge: (413, ErrorCode.PAYLOAD_TOO_LARGE),
|
||||
exceptions.UnsupportedMediaType: (
|
||||
|
||||
@@ -8,6 +8,7 @@
|
||||
|
||||
from collections.abc import AsyncIterator
|
||||
from typing import Annotated, Literal
|
||||
from urllib.parse import unquote_to_bytes
|
||||
|
||||
from fastapi import APIRouter, Query, Request
|
||||
from fastapi.responses import StreamingResponse
|
||||
@@ -25,6 +26,9 @@ from src.utils.constants import (
|
||||
|
||||
router = APIRouter(tags=["attachments"])
|
||||
|
||||
# имя параметра имени файла в строке запроса, байтами: проверка кодировки
|
||||
_FILENAME_PARAM = b"filename"
|
||||
|
||||
_BINARY = {"schema": {"type": "string", "format": "binary"}}
|
||||
# тело загрузки — сырые байты, параметра тела у ручки нет (FastAPI его не
|
||||
# читает): схему для /openapi.json и /docs задаём как в контракте
|
||||
@@ -59,6 +63,28 @@ def _media_type(request: Request) -> str | None:
|
||||
return value.split(";", 1)[0].strip().lower() or None
|
||||
|
||||
|
||||
def _check_filename_encoding(request: Request) -> None:
|
||||
"""`filename` в строке запроса — строгий UTF-8, иначе 400.
|
||||
|
||||
Starlette декодирует процент-коды с заменой неверных байтов на
|
||||
U+FFFD, и `a%FFb.png` прошёл бы как `a\\ufffdb.png`. Здесь те же пары
|
||||
(`&`, `=`, `+` — пробел), что у `parse_qsl`, но байты значения
|
||||
проверяются строго: байт вне ASCII в строке запроса (URI его не
|
||||
допускает) или неверная последовательность UTF-8 — `InvalidFilename`.
|
||||
Для принятых значений результат совпадает с разбором Starlette.
|
||||
"""
|
||||
for pair in request.scope["query_string"].split(b"&"):
|
||||
name, _, value = pair.partition(b"=")
|
||||
if unquote_to_bytes(name.replace(b"+", b" ")) != _FILENAME_PARAM:
|
||||
continue
|
||||
if not value.isascii():
|
||||
raise exceptions.InvalidFilename
|
||||
try:
|
||||
unquote_to_bytes(value.replace(b"+", b" ")).decode("utf-8")
|
||||
except UnicodeDecodeError as e:
|
||||
raise exceptions.InvalidFilename from e
|
||||
|
||||
|
||||
def _content_length(request: Request) -> int | None:
|
||||
value = request.headers.get("content-length")
|
||||
return int(value) if value is not None and value.isdigit() else None
|
||||
@@ -91,7 +117,10 @@ async def upload_attachment(
|
||||
|
||||
Тело не читается, пока не пройдены вход, параметры, членство,
|
||||
`Content-Type` и `Content-Length` (спек «Порядок проверок загрузки»).
|
||||
Кодировка `filename` проверяется здесь, до членства: это 400
|
||||
параметров, как и остальные правила имени.
|
||||
"""
|
||||
_check_filename_encoding(request)
|
||||
attachment = await attachments.upload(
|
||||
chat_id=chat_id,
|
||||
owner_id=user.id,
|
||||
|
||||
Reference in New Issue
Block a user