Описал работу с файлами и сохранил результаты проверок

This commit is contained in:
2026-11-17 13:20:44 +03:00
parent 372471ae58
commit 3b04e5cbd8
26 changed files with 880 additions and 23 deletions
+1
View File
@@ -4,3 +4,4 @@
*.yaml text eol=lf
*.cfg text eol=lf
evidence/* -whitespace
scripts/*.example.sh -text
+105 -23
View File
@@ -1,37 +1,119 @@
# Отчёт — лабораторная 4
# Лабораторная 4 — файлы в S3
- Автор, группа: TODO
- Целевая оценка; выбранный трек 5, если нужен: TODO
- Commit/PR: TODO после публикации
- Использованные источники, библиотеки и помощь ИИ: TODO
Автор: Саламатин, БПИ-2304. Целевая оценка: **4**, включая весь минимум на 3. Треки на 5 не выполнялись.
## Запуск из чистого clone
## Как запустить
TODO: версии runtime/образов, prerequisites, команды создания локальных secrets/.env, build, миграций, запуска, ожидания готовности, тестов и остановки. Указать необходимые действия оператора. Не вставлять секреты. Отдельно указать безопасную остановку и команду намеренного удаления учебных данных.
Нужны Docker Desktop с Linux containers и Compose. Из корня репозитория в PowerShell:
## Архитектура и решения
```powershell
./start.ps1
```
TODO: схема процессов/хранилищ, источник истины, транзакционные границы, ограничения. Что перенесено из lab3, что изменено в этой работе. Соответствие переменных из .env.example реальной конфигурации.
Или вручную, если установлен Python 3.9+:
## Доказательства критериев
```powershell
python scripts/init_local.py
docker compose build api checks minio
docker compose up -d --no-build --wait --wait-timeout 180
curl.exe --noproxy "*" http://127.0.0.1:8084/health/ready
```
| Критерий README | Команда/сценарий | Наблюдаемый результат | Файл доказательства |
Каждый образ собираем один раз: сервисы migrate, api и cleanup используют общий образ. Первая сборка MinIO занимает несколько минут: готовые образы из реестров оказались недоступны, поэтому Dockerfile собирает официальный исходный релиз MinIO `RELEASE.2025-09-07T16-13-09Z` и mc `RELEASE.2025-08-13T08-35-41Z`. Версии Go и базовых образов зафиксированы в Dockerfile. Python и зависимости приложения закреплены в requirements.txt и Dockerfile. После успешной сборки Compose использует локальный образ `mtusi-minio:2025-09-07`.
init_local.py один раз создаёт случайные секреты и .env. Повторный запуск сохраняет значения. Секреты не добавляются в Git. Не менять пароли при сохранённых volumes без отдельной процедуры смены пароля хранилища.
По умолчанию доступен только балансировщик на `127.0.0.1:8084`. Порт выбран отдельно от lab3. API_PORT меняет внешний порт, API_REPLICAS задаёт число API, SESSION_TTL_SECONDS — срок сессий, APP_VERSION — метку версии, APP_ENV — метку окружения. API внутри контейнера слушает 8080. Остальные настройки и пути secrets находятся в compose.yaml.
Остановить без потери данных: `docker compose stop` или `docker compose down`. Команда намеренного удаления учебных данных: `docker compose down --volumes`; в проверках она не используется.
## Что сделано и зачем
Перенесена собственная реализация lab3: FastAPI, PostgreSQL, сессии Redis с TTL и AOF, scrypt, проверка членства в чате, история с cursor, идемпотентная отправка сообщений, HAProxy и две API-реплики. Публичные contracts и tests lab4 сохранены.
Клиент обращается к HAProxy, тот выбирает API. PostgreSQL хранит пользователей, чаты, сообщения и сведения о вложениях. Оригиналы находятся в приватном bucket MinIO. Redis хранит сессии. Все три хранилища используют отдельные именованные volumes. API не хранит подтверждённые оригиналы у себя.
Миграция 003 добавляет attachments и attachment_ids сообщения. Вложение заранее связано с чатом. object_key — случайный UUID с префиксом original/, имя клиента используется только в метаданных. Доступ к метаданным и байтам проверяется по членству в чате. Для чужого объекта возвращается 404. Один участник может прикрепить файл, загруженный другим участником того же чата.
POST вложения принимает сырое тело PNG/JPEG. Лимит — 10 MiB и 40 млн пикселей. Сначала проверяем заголовки, имя и доступ, затем читаем тело по частям во временный файл с подсчётом размера и SHA-256. Временный файл — только staging на время запроса, после него закрывается. Размеры проверяем до декодирования, MIME — по фактическому формату Pillow. verify проверяет структуру, load ловит ошибки декодирования. Оригинал не перекодируется.
Одна реплика одновременно декодирует один файл. Ожидание слота ограничено 10 s, чтение тела — 20 s, общий бюджет до формирования ответа — 35 s. S3 connect/read timeout — 2/3 s, автоматических повторов PUT нет. HAProxy даёт 40 s. При отмене запроса ждём завершения уже начатой операции в потоке, прежде чем закрыть временный файл и освободить SQL-блокировку. Контейнер API ограничен 512 MiB. Это ограничивает память, но не обещает постоянную задержку под любой нагрузкой.
201 ready возвращается после S3 PUT и SQL COMMIT. GET content сначала проверяет сессию и чат, затем читает оригинал из S3 кусками по 64 KiB, без redirect. variant=original — единственный вариант. Сбой во время уже начатого скачивания может оборвать ответ: заменить его JSON-ошибкой после отправки заголовков невозможно.
Отпечаток идемпотентности сообщения теперь учитывает attachment_ids; отсутствие поля и [] равны. Пустой текст допустим с вложениями. Чужие, неизвестные и принадлежащие другому чату ID отклоняются до вставки сообщения.
## Если запись оборвалась
Общей транзакции PostgreSQL и S3 нет. Перед PUT отдельно фиксируем строку pending со случайным ключом. Затем блокируем эту строку, записываем S3 и меняем статус на ready одной SQL-транзакцией. Если процесс погибнет после PUT или SQL COMMIT завершится ошибкой, останется учтённая строка pending. Её нельзя прикрепить к сообщению или скачать через API.
Сервис cleanup раз в минуту берёт до 100 pending старше часа через FOR UPDATE SKIP LOCKED, удаляет объект S3 и затем строку БД. При ошибке S3 строка остаётся для следующего прохода. DELETE S3 повторяем, поэтому сбой между удалением объекта и COMMIT не мешает следующему запуску. Часовой grace period защищает свежие запросы, блокировка — выполняющуюся финализацию. Ready не очищаются, даже если ещё не прикреплены к сообщению: контракт разрешает прикрепить их позже.
Обрыв HTTP до завершения приёма тела не вызывает PUT. Используется одиночный PUT без multipart, незавершённые multipart-загрузки не создаются. Для всех PUT сначала существует запись в БД, поэтому полного обхода bucket для штатной очистки не нужно. Ручное изменение БД или загрузка объектов администратором вне приложения этим механизмом не покрывается.
## Приватный bucket и права
bucket-init ждёт готовности MinIO, создаёт bucket с --ignore-existing, выключает anonymous access, создаёт отдельного пользователя messenger-api и назначает ему политику. Повторный bootstrap безопасен для существующих файлов. У API есть только ListBucket для attachments и GetObject/PutObject/DeleteObject для original/*. Нет прав создавать bucket, менять политику или пользователей. У cleanup такие же ограниченные credentials. Корневой пароль доступен только MinIO и bootstrap.
MinIO не публикует порты на хост, административная консоль слушает только 127.0.0.1 внутри его контейнера. Проверка приватности выполняется напрямую по внутреннему адресу S3 без API и без подписи; проверяется и листинг bucket, и GET существующего объекта. Отдельно проверяется запрет административных операций с API credentials.
## Проверки
Полный прогон: `python scripts/verify.py`. На этом компьютере также можно использовать `../.tools/python/python.exe -X utf8 scripts/verify.py`.
```powershell
docker compose run --rm --no-deps checks make check test
docker compose run --rm --no-deps checks make test-student
docker compose run --rm --no-deps checks sh -ec 'chmod +x scripts/restart.sh; make test-persistence ACTION_SCRIPT=scripts/restart.sh'
docker compose run --rm --no-deps checks sh -ec 'chmod +x scripts/stop-one.sh; make test-failover ACTION_SCRIPT=scripts/stop-one.sh'
docker compose start api
```
Failover оставляет выбранную реплику остановленной; восстановление выполняется отдельно. verify.py делает это сам. Restart перезапускает API, PostgreSQL, Redis, MinIO и LB без удаления volumes; cleanup продолжает работу и переподключается к БД.
Проверки выполнены 17 ноября 2026 года. Ветка `solution/bpi-2304-salamatin`; исходный skeleton `ec540a1`. Проверенная реализация — commit `372471a`. Реализация находится в локальном репозитории; fork/PR ещё не публиковались.
| Требование | Проверка | Результат | Доказательство |
| --- | --- | --- | --- |
| Публичный smoke | make test | TODO | TODO |
| Остальные пункты уровня 3 | TODO | TODO | TODO |
| Все пункты уровня 4, если заявлен | TODO | TODO | TODO |
| Выбранный трек 5, если заявлен | TODO | TODO | TODO |
| Минимум lab3 и API lab4 | `make check test`, `make test-student` | Публичный smoke и 17 собственных тестов прошли | smoke.txt, student-tests.txt |
| Оригинал, checksum, сообщение с attachment_ids, доступ участника | Публичный smoke и test_validation_and_acl | Побайтовое совпадение, чужому пользователю 404 | smoke.txt, student-tests.txt |
| Ограничения bytes, pixels, MIME, filename | test_validation_and_acl | 413 / 415 / 400, без 500 | student-tests.txt |
| Чужой attachment_id и файл другого чата | test_validation_and_acl | 404, сообщение не создаётся | student-tests.txt |
| Обрыв тела и ошибка после S3 PUT | test_failed_commit_cleanup_and_abort | Обрыв не создаёт строку; PUT + ошибка SQL оставляют pending | student-tests.txt |
| Grace period и повторяемая очистка | Тот же тест | Свежий pending сохранён; старый удалён из S3 и БД; повтор безопасен | student-tests.txt |
| Недоступность S3 | test_s3_outage | live 200, ready/upload/download 503; после запуска прежний файл читается | student-tests.txt |
| Приватность и ограничение прав | test_private_bucket_and_bootstrap | Anonymous list/GET существующего объекта 403; create bucket и запись вне prefix 403 | student-tests.txt |
| Bootstrap можно повторять | Два запуска существующего bucket-init | Без ошибок, ранее загруженный файл сохранён | student-tests.txt |
| Сохранность после restart | `make test-persistence`, сравнение контейнеров | Прежняя сессия и оригинал сохранены; изменился StartedAt у API, PostgreSQL, Redis, MinIO и LB; volumes те же | persistence.txt, restart.json |
| Публичный failover | Два `make test-failover` | Обе проверки прошли, восстановление 2.309 и 2.320 s | failover-1.txt, failover-2.txt, stop-1.json, stop-2.json |
| Остановка именно загрузившей API | `python scripts/check_uploader_failover.py` в checks | Upload instance остановлен, download instance другой, SHA-256 совпал | uploader-failover.json |
| 10 одновременных загрузок и память | test_ten_parallel_uploads_memory | 10 из 10 загружены и скачаны; контрольные суммы совпали | uploads-memory.json |
TODO: добавить отдельную строку для каждого заявленного критерия. PASS без команды и наблюдения не является доказательством. Проверка инфраструктурного hook требует подтверждения, какие реальные процессы/хранилища перезапущены.
Все файлы доказательств находятся в evidence/. Итоговый smoke после отказов — smoke-final.txt. Проверки инфраструктуры выполнялись с сохранением volumes.
## Эксперименты и отказы
### Условия опыта с памятью
TODO: гипотеза, hardware/лимиты, версии, объём данных, профиль нагрузки, concurrency/arrival rate, длительность/прогрев, повторы, успешные RPS, ошибки, p50/p95/p99, CPU/RAM. Сохранить raw summary без tokens и объяснить ограничения измерения.
Docker Desktop 28.5.1, x86_64, 16 доступных CPU, 7.47 GiB RAM виртуальной машины Docker. У каждой API-реплики лимит 1 CPU и 512 MiB. Две реплики, HAProxy round-robin. Один прогон без отдельного прогрева; до опыта выполнялись функциональные проверки. Barrier запускает 10 HTTP-загрузок одновременно. Каждый файл — PNG 1700×1600 со случайными RGB-пикселями, 8173157 байт. Каждый клиент после upload скачивает файл и проверяет SHA-256. Время всего опыта с загрузкой и скачиванием — 3.776 s.
| Воздействие | Что ожидаем | Что наблюдали | Время восстановления / потеря данных |
| --- | --- | --- | --- |
| TODO | TODO | TODO | TODO |
Cgroup memory.current опрашивалась в отдельном потоке через docker exec последовательно для двух API, пауза между циклами 0.1 s; реальный интервал выше из-за накладных расходов команд. Выборочные пики — 248.3 MiB, 217.6 MiB. В JSON также сохранена memory.peak за всю жизнь контейнера: она включает предыдущие тесты и не выдается за чистый пик только этого опыта. CPU-потребление в этом опыте отдельно не измерялось. Это функциональная проверка ограниченной памяти при 10 клиентах, а не поиск максимального RPS.
## Ограничения и следующие шаги
Первые прогоны выявили ошибки проверочного окружения: запуск нового Compose-контейнера из checks разрешал bind mount относительно /checks, а restart.sh имел CRLF. Повторный bootstrap теперь запускает уже созданный init-контейнер; shell-скрипты сохранены с LF. Проверки повторены после исправлений. Бизнес-ошибки файлов не маскировались изменениями публичных tests.
TODO: какие отказы выдерживаются и какие нет; что не реализовано; где учебное упрощение; какое улучшение подтверждено, а какое пока гипотеза.
MinIO собран через go install из закреплённого тега исходников; команда minio --version у такой сборки выводит DEVELOPMENT.GOGET. Версия исходного кода закреплена в infra/s3/Dockerfile, а фактический image ID сохранён в verification.json. Это не готовый upstream Docker-образ.
## Ограничения
Стенд учебный, на одном компьютере. Один PostgreSQL, Redis, MinIO и балансировщик остаются точками отказа. Проверяется отказ API, а не потеря всего хоста. Нет резервного копирования, HTTPS для удалённого доступа и обработки изображений в фоне. Эксперимент загрузок — один функциональный прогон на локальном Docker Desktop, не оценка предельной производительности. Измерение cgroup учитывает память процесса и файловый кэш; memory.peak относится ко всей жизни контейнера.
## Источники и инструменты
Задание и контракт: https://gitea.privcloud.tech/mtusi2026/mtusi2026lab4
Исходники S3: https://github.com/minio/minio и https://github.com/minio/mc
Проверка изображений: https://pillow.readthedocs.io/en/stable/reference/Image.html
S3 SDK: https://boto3.amazonaws.com/v1/documentation/api/latest/reference/services/s3.html
Использованы FastAPI, Pydantic, Uvicorn, Psycopg, redis-py, boto3, Pillow, HAProxy. Codex помог с реализацией, тестами и объяснением работы.
BIN
View File
Binary file not shown.
+13
View File
@@ -0,0 +1,13 @@
# Для сдачи лабораторной
Ветка: solution/bpi-2304-salamatin. Целевая оценка: 4. Работа пока сохранена локально, fork и PR не опубликованы.
Предлагаемый заголовок PR: «Лабораторная 4 — добавил изображения в сообщения и хранение в S3».
Текст для PR:
Добавил загрузку PNG и JPEG в приватный MinIO. Метаданные и связь с чатом хранятся в PostgreSQL, а оригиналы доступны через любую API-реплику. Сохранил возможности третьей лабораторной, включая сессии, историю и защиту сообщений от дублей.
Проверил ограничения файлов, доступ к чужим вложениям, недоступность S3 и очистку после неудачной записи. Публичный smoke, 17 интеграционных тестов, restart и failover прошли. В опыте с 10 одновременными загрузками все файлы скачались с исходными контрольными суммами. Команды и замеры есть в REPORT.md и evidence. Целевая оценка — 4; треки на 5 не выполнялись.
Простое объяснение реализации и сценарий защиты находятся в docs/REVIEW.docx.
+10
View File
@@ -0,0 +1,10 @@
test_failed_commit_cleanup_and_abort (test_attachments.AttachmentTests.test_failed_commit_cleanup_and_abort) ... ok
test_private_bucket_and_bootstrap (test_attachments.AttachmentTests.test_private_bucket_and_bootstrap) ... ok
test_s3_outage (test_attachments.AttachmentTests.test_s3_outage) ... ok
test_ten_parallel_uploads_memory (test_attachments.AttachmentTests.test_ten_parallel_uploads_memory) ... ok
test_validation_and_acl (test_attachments.AttachmentTests.test_validation_and_acl) ... ok
----------------------------------------------------------------------
Ran 5 tests in 32.644s
OK
+145
View File
@@ -0,0 +1,145 @@
#1 [internal] load local bake definitions
#1 reading from stdin 2.57kB 0.1s done
#1 DONE 0.1s
#2 [minio internal] load build definition from Dockerfile
#2 transferring dockerfile: 502B 0.0s done
#2 DONE 0.0s
#3 [checks internal] load build definition from Dockerfile
#3 transferring dockerfile: 1.23kB 0.0s done
#3 DONE 0.0s
#4 [checks internal] load metadata for docker.io/library/python:3.13.15-slim-bookworm
#4 ...
#5 [minio internal] load metadata for docker.io/library/debian:bookworm-slim
#5 DONE 1.4s
#6 [checks internal] load metadata for docker.io/library/docker:28.5.1-cli
#6 DONE 1.4s
#7 [minio internal] load metadata for docker.io/library/golang:1.24.7-bookworm
#7 DONE 1.4s
#8 [minio internal] load .dockerignore
#8 transferring context: 2B done
#8 DONE 0.0s
#4 [checks internal] load metadata for docker.io/library/python:3.13.15-slim-bookworm
#4 DONE 1.5s
#9 [minio stage-1 1/4] FROM docker.io/library/debian:bookworm-slim@sha256:734a72b3d6142a71993b4bc580ca01d8ca687f77a2c422d96a961d3376b179bc
#9 resolve docker.io/library/debian:bookworm-slim@sha256:734a72b3d6142a71993b4bc580ca01d8ca687f77a2c422d96a961d3376b179bc 0.1s done
#9 DONE 0.1s
#10 [api internal] load .dockerignore
#10 transferring context: 216B 0.0s done
#10 DONE 0.0s
#11 [minio build 1/3] FROM docker.io/library/golang:1.24.7-bookworm@sha256:b8bae5bd9ba9b1f89b635c91c24cc75cea335a16fb5076310f38566fc674b1ec
#11 resolve docker.io/library/golang:1.24.7-bookworm@sha256:b8bae5bd9ba9b1f89b635c91c24cc75cea335a16fb5076310f38566fc674b1ec 0.1s done
#11 DONE 0.1s
#12 [minio stage-1 3/4] COPY --from=build /go/bin/minio /usr/local/bin/minio
#12 CACHED
#13 [minio stage-1 2/4] RUN apt-get update && apt-get install -y --no-install-recommends ca-certificates && rm -rf /var/lib/apt/lists/*
#13 CACHED
#14 [minio build 2/3] RUN go install github.com/minio/minio@RELEASE.2025-09-07T16-13-09Z
#14 CACHED
#15 [minio build 3/3] RUN go install github.com/minio/mc@RELEASE.2025-08-13T08-35-41Z
#15 CACHED
#16 [minio stage-1 4/4] COPY --from=build /go/bin/mc /usr/local/bin/mc
#16 CACHED
#17 [checks internal] load build context
#17 transferring context: 1.21kB 0.0s done
#17 DONE 0.0s
#18 [minio] exporting to image
#18 exporting layers done
#18 exporting manifest sha256:2449e121300628a4d3ee6f0b3a8d4c119b6d188d3cc9b124b04527a9c5094fd7 done
#18 exporting config sha256:eb3e03df3adb64d1aa20803a6b0f5b32d16cb32a884d69fb0220bcd345bfe7d0 done
#18 exporting attestation manifest sha256:9499618a05c34c220934419c19797b3cd69e55dd566523492ec3664ee0ce4eec 0.1s done
#18 exporting manifest list sha256:22163eb16611d12c5dd11f7f60d8297fda4840075df379a38b03d4c0c15f8350
#18 exporting manifest list sha256:22163eb16611d12c5dd11f7f60d8297fda4840075df379a38b03d4c0c15f8350 0.0s done
#18 naming to docker.io/library/mtusi-minio:2025-09-07 done
#18 unpacking to docker.io/library/mtusi-minio:2025-09-07 0.0s done
#18 DONE 0.2s
#19 [checks runtime 1/7] FROM docker.io/library/python:3.13.15-slim-bookworm@sha256:2325bb286ec344af3e5898cc224b5844e2707ac6e26b1632516fd3edc84a5e26
#19 resolve docker.io/library/python:3.13.15-slim-bookworm@sha256:2325bb286ec344af3e5898cc224b5844e2707ac6e26b1632516fd3edc84a5e26 0.1s done
#19 DONE 0.1s
#20 [checks runtime 3/7] COPY requirements.txt .
#20 CACHED
#21 [checks runtime 6/7] COPY migrations ./migrations
#21 CACHED
#22 [checks runtime 5/7] COPY app ./app
#22 CACHED
#23 [checks runtime 4/7] RUN pip install --no-cache-dir -r requirements.txt && useradd --uid 10001 --create-home messenger
#23 CACHED
#24 [checks runtime 2/7] WORKDIR /app
#24 CACHED
#25 [api runtime 7/7] COPY contracts/openapi.json ./contracts/openapi.json
#25 CACHED
#26 [checks docker_cli 1/1] FROM docker.io/library/docker:28.5.1-cli@sha256:9190b0613792e658a7783cf14b2d5ace5941bb68ede7276922ea36ee457d76ad
#26 resolve docker.io/library/docker:28.5.1-cli@sha256:9190b0613792e658a7783cf14b2d5ace5941bb68ede7276922ea36ee457d76ad 0.1s done
#26 DONE 0.1s
#27 [checks checks 3/4] RUN apt-get update && apt-get install -y --no-install-recommends make && rm -rf /var/lib/apt/lists/*
#27 CACHED
#28 [checks checks 1/4] COPY --from=docker_cli /usr/local/bin/docker /usr/local/bin/docker
#28 CACHED
#29 [checks checks 2/4] COPY --from=docker_cli /usr/local/libexec/docker/cli-plugins/docker-compose /usr/local/libexec/docker/cli-plugins/docker-compose
#29 CACHED
#30 [checks checks 4/4] WORKDIR /checks
#30 CACHED
#31 [api] exporting to image
#31 exporting layers done
#31 exporting manifest sha256:f61589a6326621706499e53e5bbb3cd64adb1922077dbf17fa4f9b99c160c4ad done
#31 exporting config sha256:323d0c93939e729d683f62209e66c66e00899ccd625d4a6125a8adffa249e0dd done
#31 exporting attestation manifest sha256:203a99be0b7b688db68bec7480e19c22df69e9c524af62fe00b3d84979d8ae71
#31 exporting attestation manifest sha256:203a99be0b7b688db68bec7480e19c22df69e9c524af62fe00b3d84979d8ae71 0.2s done
#31 exporting manifest list sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81
#31 exporting manifest list sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81 0.1s done
#31 naming to docker.io/library/mtusi-messenger:lab4 0.0s done
#31 unpacking to docker.io/library/mtusi-messenger:lab4
#31 unpacking to docker.io/library/mtusi-messenger:lab4 0.0s done
#31 DONE 0.4s
#32 [minio] resolving provenance for metadata file
#32 DONE 0.0s
#33 [checks] exporting to image
#33 exporting layers 0.0s done
#33 exporting manifest sha256:a68f664fd2d18ec2738f2ee35624fd8f63dc8f24c95aaf8dbd2278bc1eeb8fbe 0.0s done
#33 exporting config sha256:2194ef17fbdc12a9698ad7e9b441faf6131035b629af019697266b8a2e4636e6 0.0s done
#33 exporting attestation manifest sha256:f8d7f068ee093a4abd135933f9643b48967a14886e6386bef99b5fe57c2e24c4 0.2s done
#33 exporting manifest list sha256:293dd02cee83197a8f5b989a56b48a0a34ce4449a80a97684914e407abfadb60 0.0s done
#33 naming to docker.io/library/mtusi-messenger:lab4-checks 0.0s done
#33 unpacking to docker.io/library/mtusi-messenger:lab4-checks 0.0s done
#33 DONE 0.5s
#34 [api] resolving provenance for metadata file
#34 DONE 0.1s
#35 [checks] resolving provenance for metadata file
#35 DONE 0.0s
mtusi-messenger:lab4-checks Built
mtusi-minio:2025-09-07 Built
mtusi-messenger:lab4 Built
+1
View File
@@ -0,0 +1 @@
{"docker_version":"28.5.1","cpus":16,"memory_bytes":8017600512,"os":"Docker Desktop","architecture":"x86_64"}
+4
View File
@@ -0,0 +1,4 @@
python3 tests/resilience.py --mode failover --action-script "scripts/stop-one.sh" --base-url "http://lb:8080"
Executing explicit failover hook; hook output suppressed to avoid leaking secrets.
{"observed_instances_before": 2, "successful_writes": 115, "failed_attempts": 4, "first_recovery_seconds": 2.309}
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
+4
View File
@@ -0,0 +1,4 @@
python3 tests/resilience.py --mode failover --action-script "scripts/stop-one.sh" --base-url "http://lb:8080"
Executing explicit failover hook; hook output suppressed to avoid leaking secrets.
{"observed_instances_before": 2, "successful_writes": 112, "failed_attempts": 4, "first_recovery_seconds": 2.32}
PASS: failover preserved confirmed data and existing session. Hook scope needs operator evidence.
+14
View File
@@ -0,0 +1,14 @@
{
"redis": {
"ready_status": 503,
"protected_status": 503,
"elapsed_seconds": 2.002,
"anonymous_status": 401
},
"postgres": {
"ready_status": 503,
"protected_status": 503,
"elapsed_seconds": 1.006,
"anonymous_status": 401
}
}
+9
View File
@@ -0,0 +1,9 @@
{
"requests": 100,
"clients": 10,
"real_containers": 2,
"observed_instances": 2,
"messages": 1,
"replay_records": 1,
"lb_replays": 12
}
+1
View File
@@ -0,0 +1 @@
PASS: local .env and secret files exist; existing values preserved
+7
View File
@@ -0,0 +1,7 @@
{
"target_instance": "11369df6513b-7a12c424f604",
"container": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"exit_code": 0,
"stop_seconds": 1.218,
"remains_stopped": true
}
+3
View File
@@ -0,0 +1,3 @@
python3 tests/resilience.py --mode persistence --action-script "scripts/restart.sh" --base-url "http://lb:8080"
Executing explicit persistence hook; hook output suppressed to avoid leaking secrets.
PASS: persistence preserved confirmed data and existing session. Hook scope needs operator evidence.
+188
View File
@@ -0,0 +1,188 @@
{
"before": [
{
"service": "api",
"id": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"name": "mtusi-lab4-api-1",
"started_at": "2026-11-17T10:14:25.54787897Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "api",
"id": "34933727d62b291b9b14387e41b499a4599af121cb897e30bc9200c3478a165d",
"name": "mtusi-lab4-api-2",
"started_at": "2026-11-17T10:14:26.016067991Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "postgres",
"id": "93ed9bf6ea6de1b245f658c6831c310249c5069b02b65f00302086a97178107a",
"name": "mtusi-lab4-postgres-1",
"started_at": "2026-11-17T10:14:50.602504653Z",
"status": "running",
"image": "sha256:f3bd19c606e442c3d7bdfa8002e03fe260a1023351e0ea4598032022b68dd6e3",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_postgres_data"
]
},
{
"service": "redis",
"id": "9f0b3af812666d929002ee64cec98b1f07a2f6ba52fc47091c65c993cfbafbb5",
"name": "mtusi-lab4-redis-1",
"started_at": "2026-11-17T10:14:54.289868588Z",
"status": "running",
"image": "sha256:90e7a336d044f1abc9e9dbc05d65566850896d11453bbd1dd0fb7e5059f0e8fb",
"user": "",
"memory_bytes": 201326592,
"nano_cpus": 500000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_redis_data"
]
},
{
"service": "minio",
"id": "0d4dda70b9655abd1ec7b1db0b0fde843c6a922c176a8221871aa0691d666499",
"name": "mtusi-lab4-minio-1",
"started_at": "2026-11-17T10:15:21.80123754Z",
"status": "running",
"image": "sha256:22163eb16611d12c5dd11f7f60d8297fda4840075df379a38b03d4c0c15f8350",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_s3_data"
]
},
{
"service": "lb",
"id": "533be6a4c5d73171a723649f9aebc19f796c5df5170a3b7692f0aeb2a4c31c86",
"name": "mtusi-lab4-lb-1",
"started_at": "2026-11-17T10:05:27.40544926Z",
"status": "running",
"image": "sha256:e3229153dd6429fc71f8a9a1f1ccbf8dab6962422d7043c81e84dd6a075e90ee",
"user": "haproxy",
"memory_bytes": 134217728,
"nano_cpus": 500000000,
"published_ports": {
"8080/tcp": [
{
"HostIp": "127.0.0.1",
"HostPort": "8084"
}
]
},
"volumes": []
}
],
"after": [
{
"service": "api",
"id": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"name": "mtusi-lab4-api-1",
"started_at": "2026-11-17T10:16:26.528035892Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "api",
"id": "34933727d62b291b9b14387e41b499a4599af121cb897e30bc9200c3478a165d",
"name": "mtusi-lab4-api-2",
"started_at": "2026-11-17T10:16:26.435315265Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "postgres",
"id": "93ed9bf6ea6de1b245f658c6831c310249c5069b02b65f00302086a97178107a",
"name": "mtusi-lab4-postgres-1",
"started_at": "2026-11-17T10:16:25.799731699Z",
"status": "running",
"image": "sha256:f3bd19c606e442c3d7bdfa8002e03fe260a1023351e0ea4598032022b68dd6e3",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_postgres_data"
]
},
{
"service": "redis",
"id": "9f0b3af812666d929002ee64cec98b1f07a2f6ba52fc47091c65c993cfbafbb5",
"name": "mtusi-lab4-redis-1",
"started_at": "2026-11-17T10:16:25.688695043Z",
"status": "running",
"image": "sha256:90e7a336d044f1abc9e9dbc05d65566850896d11453bbd1dd0fb7e5059f0e8fb",
"user": "",
"memory_bytes": 201326592,
"nano_cpus": 500000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_redis_data"
]
},
{
"service": "minio",
"id": "0d4dda70b9655abd1ec7b1db0b0fde843c6a922c176a8221871aa0691d666499",
"name": "mtusi-lab4-minio-1",
"started_at": "2026-11-17T10:16:25.996050256Z",
"status": "running",
"image": "sha256:22163eb16611d12c5dd11f7f60d8297fda4840075df379a38b03d4c0c15f8350",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_s3_data"
]
},
{
"service": "lb",
"id": "533be6a4c5d73171a723649f9aebc19f796c5df5170a3b7692f0aeb2a4c31c86",
"name": "mtusi-lab4-lb-1",
"started_at": "2026-11-17T10:16:25.875848621Z",
"status": "running",
"image": "sha256:e3229153dd6429fc71f8a9a1f1ccbf8dab6962422d7043c81e84dd6a075e90ee",
"user": "haproxy",
"memory_bytes": 134217728,
"nano_cpus": 500000000,
"published_ports": {
"8080/tcp": [
{
"HostIp": "127.0.0.1",
"HostPort": "8084"
}
]
},
"volumes": []
}
]
}
+2
View File
@@ -0,0 +1,2 @@
python3 tests/smoke.py --base-url "http://lb:8080"
PASS: lab4 public API scenario; infrastructure and grading evidence remain separate.
+4
View File
@@ -0,0 +1,4 @@
python3 scripts/check_contract.py
PASS: offline skeleton structure, local refs and Python syntax; application NOT tested.
python3 tests/smoke.py --base-url "http://lb:8080"
PASS: lab4 public API scenario; infrastructure and grading evidence remain separate.
+63
View File
@@ -0,0 +1,63 @@
{
"status": "PASS",
"unchanged": [
{
"path": "README.md",
"sha256": "db1ff101968c21d6ada8972c1f4708936457af2fc1fa37ff7918137a83de3860"
},
{
"path": "COURSE.md",
"sha256": "1e3c65e345b7f89d08ed86a3b50061935ee8157907cb4043cfa40689781f54e0"
},
{
"path": "tests/client.py",
"sha256": "b318084e2a4c380db91a55d082190bf33979fa556a4c4ca87e01f46ae275775c"
},
{
"path": "tests/image_probe.py",
"sha256": "ef48d8882ab138b9699a173e7419e5814c22a10b01b6b0ddbb50ea49481a5baa"
},
{
"path": "tests/load.py",
"sha256": "9a9aff05e109630e243c3b092d7bd564344e4872b29e38b6618647a08460a72e"
},
{
"path": "tests/README.md",
"sha256": "89afb3063ec0ccd7cb68fdac1de57513f9cc81b77bad96f202daaca2b66a5e82"
},
{
"path": "tests/resilience.py",
"sha256": "4ba30b9c81a0664127ddab2b0bea5e76aa2087be8bb25aa13cd5a8e69be23fdd"
},
{
"path": "tests/smoke.py",
"sha256": "354e168e1e644145c3ff50bbbe189fd217cce5659aa125f588098025ffab0fdf"
},
{
"path": "tests/fixtures/README.md",
"sha256": "0eaa4e8837032d1786fc0c4b1576656ff3f4d1931fdd51b80e5c053f88ab3872"
},
{
"path": "tests/fixtures/sample.png",
"sha256": "99ea7533c441f79cd630d15ce4d58d1ec4e06f6f0efb3b77a5c088305cd1bd75"
},
{
"path": "contracts/examples.json",
"sha256": "2816da2e63058d55bdcbeceb92b231ea2509c86df8c5a0aa908be83bd0599469"
},
{
"path": "contracts/infrastructure.json",
"sha256": "18a6b38deab39878da174f01e54addc4c7de556f9b3b7f37d96ec1ef0dd240b7"
},
{
"path": "contracts/openapi.json",
"sha256": "61c7dbac7bd8d57423a2883b4b7b1277e8e35918d25c37e2cd02eaf6817936f0"
},
{
"path": "contracts/README.md",
"sha256": "4c04faede4a2ffa35183455b51da21764b7fa3997c0a4b3963614b82586eed28"
}
],
"baseline_commit": "ec540a1a725862a8619fcb758daec4ad197f0dd5",
"comparison": "Text compared after CRLF to LF normalization; binary fixtures compared byte-for-byte"
}
+65
View File
@@ -0,0 +1,65 @@
Container mtusi-lab4-redis-1 Running
Container mtusi-lab4-postgres-1 Running
Container mtusi-lab4-minio-1 Recreate
Container mtusi-lab4-migrate-1 Recreate
Container mtusi-lab4-migrate-1 Recreated
Container mtusi-lab4-minio-1 Recreated
Container mtusi-lab4-bucket-init-1 Recreate
Container mtusi-lab4-bucket-init-1 Recreated
Container mtusi-lab4-cleanup-1 Recreate
Container mtusi-lab4-api-1 Recreate
Container mtusi-lab4-api-2 Recreate
Container mtusi-lab4-api-1 Recreated
Container mtusi-lab4-api-2 Recreated
Container mtusi-lab4-lb-1 Running
Container mtusi-lab4-cleanup-1 Recreated
Container mtusi-lab4-minio-1 Starting
Container mtusi-lab4-postgres-1 Waiting
Container mtusi-lab4-minio-1 Started
Container mtusi-lab4-minio-1 Waiting
Container mtusi-lab4-postgres-1 Healthy
Container mtusi-lab4-migrate-1 Starting
Container mtusi-lab4-migrate-1 Started
Container mtusi-lab4-minio-1 Healthy
Container mtusi-lab4-bucket-init-1 Starting
Container mtusi-lab4-bucket-init-1 Started
Container mtusi-lab4-bucket-init-1 Waiting
Container mtusi-lab4-migrate-1 Waiting
Container mtusi-lab4-redis-1 Waiting
Container mtusi-lab4-redis-1 Waiting
Container mtusi-lab4-bucket-init-1 Waiting
Container mtusi-lab4-migrate-1 Waiting
Container mtusi-lab4-migrate-1 Exited
Container mtusi-lab4-redis-1 Healthy
Container mtusi-lab4-redis-1 Healthy
Container mtusi-lab4-migrate-1 Exited
Container mtusi-lab4-bucket-init-1 Exited
Container mtusi-lab4-api-1 Starting
Container mtusi-lab4-bucket-init-1 Exited
Container mtusi-lab4-cleanup-1 Starting
Container mtusi-lab4-cleanup-1 Started
Container mtusi-lab4-api-1 Started
Container mtusi-lab4-api-2 Starting
Container mtusi-lab4-api-2 Started
Container mtusi-lab4-api-1 Waiting
Container mtusi-lab4-api-2 Waiting
Container mtusi-lab4-api-1 Healthy
Container mtusi-lab4-api-2 Healthy
Container mtusi-lab4-migrate-1 Waiting
Container mtusi-lab4-minio-1 Waiting
Container mtusi-lab4-cleanup-1 Waiting
Container mtusi-lab4-bucket-init-1 Waiting
Container mtusi-lab4-api-1 Waiting
Container mtusi-lab4-api-2 Waiting
Container mtusi-lab4-redis-1 Waiting
Container mtusi-lab4-lb-1 Waiting
Container mtusi-lab4-postgres-1 Waiting
Container mtusi-lab4-redis-1 Healthy
Container mtusi-lab4-migrate-1 Exited
Container mtusi-lab4-cleanup-1 Healthy
Container mtusi-lab4-minio-1 Healthy
Container mtusi-lab4-bucket-init-1 Exited
Container mtusi-lab4-lb-1 Healthy
Container mtusi-lab4-postgres-1 Healthy
Container mtusi-lab4-api-1 Healthy
Container mtusi-lab4-api-2 Healthy
+7
View File
@@ -0,0 +1,7 @@
{
"target_instance": "11369df6513b-78d3111280df",
"container": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"exit_code": 0,
"stop_seconds": 1.012,
"remains_stopped": true
}
+7
View File
@@ -0,0 +1,7 @@
{
"target_instance": "11369df6513b-7a12c424f604",
"container": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"exit_code": 0,
"stop_seconds": 1.218,
"remains_stopped": true
}
+28
View File
@@ -0,0 +1,28 @@
python3 -m unittest discover -s student-tests -v
test_composite_chat_rollback (test_api.APITests.test_composite_chat_rollback) ... ROLLBACK: invalid second member left no chat or membership rows
ok
test_concurrent_messages (test_api.APITests.test_concurrent_messages) ... ok
test_cursor_binding_and_chat_pages (test_api.APITests.test_cursor_binding_and_chat_pages) ... CONCURRENCY: 10 clients, 100 confirmations, 100 unique messages
ok
test_dependency_failures (test_api.APITests.test_dependency_failures) ... FAILURES: Redis/PostgreSQL -> bounded 503, live 200, anonymous 401, recovery with old session
ok
test_passwords_and_authentication (test_api.APITests.test_passwords_and_authentication) ... ok
test_redis_crash_durability (test_api.APITests.test_redis_crash_durability) ... REDIS CRASH: old session survived SIGKILL/AOF replay, expiry deadline unchanged
ok
test_registration_race (test_api.APITests.test_registration_race) ... ok
test_validation_and_access (test_api.APITests.test_validation_and_access) ... RACE: 10 requests, 1 created, 9 conflicts, 1 database row
ok
test_failed_commit_cleanup_and_abort (test_attachments.AttachmentTests.test_failed_commit_cleanup_and_abort) ... ok
test_private_bucket_and_bootstrap (test_attachments.AttachmentTests.test_private_bucket_and_bootstrap) ... ok
test_s3_outage (test_attachments.AttachmentTests.test_s3_outage) ... ok
test_ten_parallel_uploads_memory (test_attachments.AttachmentTests.test_ten_parallel_uploads_memory) ... ok
test_validation_and_acl (test_attachments.AttachmentTests.test_validation_and_acl) ... ok
test_expired_key_and_same_session_on_all_instances (test_replication.ReplicationTests.test_expired_key_and_same_session_on_all_instances) ... ok
test_failed_transaction_does_not_save_message_or_replay (test_replication.ReplicationTests.test_failed_transaction_does_not_save_message_or_replay) ... ok
test_key_validation_scope_conflict_and_logout (test_replication.ReplicationTests.test_key_validation_scope_conflict_and_logout) ... ok
test_parallel_replay_across_real_replicas (test_replication.ReplicationTests.test_parallel_replay_across_real_replicas) ... ok
----------------------------------------------------------------------
Ran 17 tests in 56.952s
OK
+9
View File
@@ -0,0 +1,9 @@
{
"upload_instance": "11369df6513b-0e6a7c308f1f",
"stopped_container": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"download_instance": "34933727d62b-46b046778cd1",
"sha256": "99ea7533c441f79cd630d15ce4d58d1ec4e06f6f0efb3b77a5c088305cd1bd75",
"size_bytes": 111817,
"stop_and_download_seconds": 1.478,
"status": "PASS"
}
+1
View File
@@ -0,0 +1 @@
PASS: original downloaded through another replica after uploader stopped
+83
View File
@@ -0,0 +1,83 @@
{
"concurrency": 10,
"successful": 10,
"size_bytes": 8173157,
"duration_seconds": 3.775760334999859,
"upload_and_download_seconds": [
2.5575144990000354,
3.2212767769999573,
2.0264911270000994,
1.459654650999937,
1.467557356000043,
1.9695844590000888,
3.1675644580000153,
3.765557230000013,
3.6248971439999877,
2.518300054000065
],
"api_container_ids": [
"11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"34933727d62b291b9b14387e41b499a4599af121cb897e30bc9200c3478a165d"
],
"memory_samples": [
{
"elapsed": 0.774,
"bytes": [
260337664,
228118528
]
},
{
"elapsed": 1.362,
"bytes": [
243322880,
211398656
]
},
{
"elapsed": 1.852,
"bytes": [
247353344,
208109568
]
},
{
"elapsed": 2.318,
"bytes": [
242929664,
207036416
]
},
{
"elapsed": 2.773,
"bytes": [
240996352,
205451264
]
},
{
"elapsed": 3.255,
"bytes": [
243478528,
208338944
]
},
{
"elapsed": 3.752,
"bytes": [
241332224,
200949760
]
}
],
"sampled_peak_bytes": [
260337664,
228118528
],
"cgroup_memory_peak_bytes": [
264757248,
230592512
],
"memory_limit_bytes": 536870912,
"note": "memory.current includes cache and runtime; memory.peak covers container lifetime, not only experiment"
}
+106
View File
@@ -0,0 +1,106 @@
{
"smoke": "evidence/smoke.txt",
"student_tests": "evidence/student-tests.txt",
"persistence_seconds": 8.606,
"failover_1_seconds": 18.833,
"failover_2_seconds": 18.869,
"uploader_failover_seconds": 8.165,
"final_smoke_seconds": 3.704,
"status": "PASS",
"containers": [
{
"service": "api",
"id": "11369df6513b62499699379b228bfb78f7954c25c463501928ef3afb2f5ce230",
"name": "mtusi-lab4-api-1",
"started_at": "2026-11-17T10:17:41.057545955Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "api",
"id": "34933727d62b291b9b14387e41b499a4599af121cb897e30bc9200c3478a165d",
"name": "mtusi-lab4-api-2",
"started_at": "2026-11-17T10:16:26.435315265Z",
"status": "running",
"image": "sha256:8d7aec5e37c28f751a22557af6fd00e1456c7ef84c9ef090d104caae502def81",
"user": "messenger",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": []
},
{
"service": "postgres",
"id": "93ed9bf6ea6de1b245f658c6831c310249c5069b02b65f00302086a97178107a",
"name": "mtusi-lab4-postgres-1",
"started_at": "2026-11-17T10:16:25.799731699Z",
"status": "running",
"image": "sha256:f3bd19c606e442c3d7bdfa8002e03fe260a1023351e0ea4598032022b68dd6e3",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_postgres_data"
]
},
{
"service": "redis",
"id": "9f0b3af812666d929002ee64cec98b1f07a2f6ba52fc47091c65c993cfbafbb5",
"name": "mtusi-lab4-redis-1",
"started_at": "2026-11-17T10:16:25.688695043Z",
"status": "running",
"image": "sha256:90e7a336d044f1abc9e9dbc05d65566850896d11453bbd1dd0fb7e5059f0e8fb",
"user": "",
"memory_bytes": 201326592,
"nano_cpus": 500000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_redis_data"
]
},
{
"service": "minio",
"id": "0d4dda70b9655abd1ec7b1db0b0fde843c6a922c176a8221871aa0691d666499",
"name": "mtusi-lab4-minio-1",
"started_at": "2026-11-17T10:16:25.996050256Z",
"status": "running",
"image": "sha256:22163eb16611d12c5dd11f7f60d8297fda4840075df379a38b03d4c0c15f8350",
"user": "",
"memory_bytes": 536870912,
"nano_cpus": 1000000000,
"published_ports": {},
"volumes": [
"mtusi-lab4_s3_data"
]
},
{
"service": "lb",
"id": "533be6a4c5d73171a723649f9aebc19f796c5df5170a3b7692f0aeb2a4c31c86",
"name": "mtusi-lab4-lb-1",
"started_at": "2026-11-17T10:16:25.875848621Z",
"status": "running",
"image": "sha256:e3229153dd6429fc71f8a9a1f1ccbf8dab6962422d7043c81e84dd6a075e90ee",
"user": "haproxy",
"memory_bytes": 134217728,
"nano_cpus": 500000000,
"published_ports": {
"8080/tcp": [
{
"HostIp": "127.0.0.1",
"HostPort": "8084"
}
]
},
"volumes": []
}
],
"implementation_commit": "372471a",
"student_tests_passed": 17,
"completed_local_date": "2026-11-17 Europe/Moscow"
}