fix: address attachments verify findings
- keep one upload body in memory: BytesIO + getvalue() without copy, fixed glibc mmap threshold in the image (no realloc copy on growth) - stop PNG inflate at expected size + 1 byte - reject filename that is not valid UTF-8 after percent-decoding (400) - failure stand: env limit variables do not change attachment limits; history with attachment_ids while S3 is stopped - drop dead constants; restate "old image on new schema" scenario Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
@@ -56,10 +56,9 @@ CHAT_MEMBERS_MIN = 1
|
||||
CHAT_MEMBERS_MAX = 100
|
||||
|
||||
# сообщение
|
||||
# пустой текст допустим только вместе с вложением: правило — в сервисе и
|
||||
# схеме API, CHECK в БД — только верхняя граница (design change
|
||||
# `attachments`, решение 3)
|
||||
MESSAGE_TEXT_MIN_LENGTH = 1
|
||||
# нижней границы нет: пустой текст допустим только вместе с вложением,
|
||||
# правило — в схеме API, CHECK в БД — только верхняя граница (design
|
||||
# change `attachments`, решения 3 и 8)
|
||||
MESSAGE_TEXT_MAX_LENGTH = 4000
|
||||
MESSAGE_ATTACHMENTS_MAX = 10
|
||||
|
||||
@@ -80,8 +79,6 @@ OBJECT_KEY_MAX_BYTES = 1024
|
||||
# ключ объекта: `<имя базы>/attachments/<id>/original`
|
||||
ATTACHMENT_KEY_PREFIX = "attachments"
|
||||
ATTACHMENT_ORIGINAL_SUFFIX = "original"
|
||||
# блок чтения тела загрузки не больше этого, байты
|
||||
ATTACHMENT_READ_CHUNK_BYTES = 64 * 1024
|
||||
|
||||
# пагинация
|
||||
PAGE_LIMIT_MIN = 1
|
||||
|
||||
+11
-3
@@ -15,7 +15,8 @@
|
||||
суммы.
|
||||
|
||||
Память не зависит от числа пикселей: IDAT распаковывается блоками не
|
||||
больше `_INFLATE_OUT_BYTES`, а вход подаётся кусками `_INFLATE_IN_BYTES`.
|
||||
больше `_INFLATE_OUT_BYTES` и не дальше ожидаемого объёма плюс байт, а
|
||||
вход подаётся кусками `_INFLATE_IN_BYTES`.
|
||||
Строки проверяются срезом с шагом длины строки, конец данных скана JPEG
|
||||
ищет регулярное выражение — оба в C, без цикла Python по строкам и
|
||||
байтам. Только stdlib, без логов: бросает свои исключения, сервис
|
||||
@@ -181,8 +182,15 @@ class _IdatStream:
|
||||
|
||||
def _inflate(self, piece: memoryview | bytes) -> None:
|
||||
while True:
|
||||
# не дальше ожидаемого объёма: «бомбу» выдаёт первый лишний
|
||||
# байт, а не блок; больше ожидаемого `_check_rows` не пустит,
|
||||
# поэтому предел не меньше 1
|
||||
max_length = min(
|
||||
_INFLATE_OUT_BYTES,
|
||||
self._expected - self._total + 1,
|
||||
)
|
||||
try:
|
||||
out = self._inflater.decompress(piece, _INFLATE_OUT_BYTES)
|
||||
out = self._inflater.decompress(piece, max_length)
|
||||
except zlib.error as e:
|
||||
raise DamagedImage("broken image data stream") from e
|
||||
self._check_rows(out)
|
||||
@@ -190,7 +198,7 @@ class _IdatStream:
|
||||
return
|
||||
piece = self._inflater.unconsumed_tail
|
||||
# вход кончился, а выход не упёрся в предел — буфер пуст
|
||||
if not piece and len(out) < _INFLATE_OUT_BYTES:
|
||||
if not piece and len(out) < max_length:
|
||||
return
|
||||
|
||||
def _check_rows(self, out: bytes) -> None:
|
||||
|
||||
Reference in New Issue
Block a user