Files
mtusi2026lab6/bench/bench.compose.yml
T

189 lines
8.1 KiB
YAML
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Override нагрузочного стенда (bench/run.py): тот же compose.yaml под
# проектом vlad-bench, со своими volume, сетью, именами и лимитами. Пины
# хранилищ и LB, healthcheck хранилищ, valkey.conf, haproxy.cfg и
# миграции — из основного файла. Подстановки — bench/bench.env, а не .env
# рабочего стенда; пароли, образ и BENCH_* передаёт run.py (поля профиля),
# без них стенд не поднимается. Что не меняется между метками —
# bench/AGENTS.md.
#
# Лимиты — в той же форме deploy.resources.limits, что у основного файла:
# cpus / mem_limit рядом с ними compose не принимает. Swap выключен
# (memswap_limit = memory). Портов на хост нет: генератор и сэмплер ходят
# внутри сети vlad-bench-net.
#
# S3, s3-bootstrap и уборщик (лаба 4) запускают только профили uploads и
# reconcile: остальные поднимают сервисы списком и реплики с --no-deps, их
# методика не меняется. Секреты S3 compose требует при разборе файла (:?),
# поэтому run.py генерирует их на каждый прогон любого профиля.
#
# Лаба 5: брокер, relay и worker поднимает только профиль queue. Пароль
# брокера, ключи worker в S3 и BENCH_MQ_*, BENCH_WORKER_* run.py тоже
# передаёт всем профилям: файл разбирается целиком. Предел незавершённых
# заданий у реплик по умолчанию снят (0): профили лабы 4 мерят загрузку,
# а не очередь.
services:
postgres:
container_name: vlad-bench-postgres
# без автоперезапуска: если база упадёт, run.py поставит прогону stand_down
restart: "no"
command: ["postgres", "-c", "max_connections=${BENCH_DB_MAX_CONNECTIONS:?run make bench-*}"]
ports: !reset []
deploy:
resources:
limits:
cpus: ${BENCH_DB_CPUS:?run make bench-*}
memory: ${BENCH_DB_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_DB_MEMORY:?run make bench-*}
valkey:
container_name: vlad-bench-valkey
restart: "no"
ports: !reset []
deploy:
resources:
limits:
cpus: ${BENCH_CACHE_CPUS:?run make bench-*}
memory: ${BENCH_CACHE_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_CACHE_MEMORY:?run make bench-*}
# образ, аргументы, healthcheck и GOMEMLIMIT — из основного файла;
# volume — свой у проекта (vlad-bench_s3data), профиль uploads заводит
# новый на каждый прогон
s3:
container_name: vlad-bench-s3
restart: "no"
ports: !reset []
deploy:
resources:
limits:
cpus: ${BENCH_S3_CPUS:?run make bench-*}
memory: ${BENCH_S3_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_S3_MEMORY:?run make bench-*}
migrate:
image: ${BENCH_IMAGE:?run make bench-*}
# только разовые проходы профиля reconcile (docker compose run): лимит CPU
# прохода — BENCH_CLEANER_CPUS вызова
cleaner:
image: ${BENCH_IMAGE:?run make bench-*}
restart: "no"
deploy:
resources:
limits:
cpus: ${BENCH_CLEANER_CPUS:?run make bench-*}
memory: ${BENCH_CLEANER_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_CLEANER_MEMORY:?run make bench-*}
# реплики без container_name: их число — BENCH_API_REPLICAS (--scale)
api:
image: ${BENCH_IMAGE:?run make bench-*}
restart: "no"
# проверка образа — второй процесс Python раз в несколько секунд в квоте
# CPU реплики; готовность и так проверяет LB раз в секунду
healthcheck:
disable: true
environment:
SESSION_TTL_SECONDS: ${BENCH_SESSION_TTL:?run make bench-*}
UPLOAD_MAX_UNFINISHED: ${BENCH_UPLOAD_MAX_UNFINISHED:-0}
deploy:
replicas: ${BENCH_API_REPLICAS:?run make bench-*}
resources:
limits:
cpus: ${BENCH_API_CPUS:?run make bench-*}
memory: ${BENCH_API_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_API_MEMORY:?run make bench-*}
haproxy:
container_name: vlad-bench-lb
restart: "no"
ports: !reset []
deploy:
resources:
limits:
cpus: ${BENCH_LB_CPUS:?run make bench-*}
memory: ${BENCH_LB_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_LB_MEMORY:?run make bench-*}
# брокер: образ, healthcheck, rabbitmq.conf и hostname — из основного
# файла; volume свой у проекта (vlad-bench_rmqdata), down -v его удаляет
rabbitmq:
container_name: vlad-bench-mq
restart: "no"
ports: !reset []
deploy:
resources:
limits:
cpus: ${BENCH_MQ_CPUS:?run make bench-*}
memory: ${BENCH_MQ_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_MQ_MEMORY:?run make bench-*}
# relay — лимиты рабочего стенда, в профиле queue не меняются
relay:
container_name: vlad-bench-relay
image: ${BENCH_IMAGE:?run make bench-*}
restart: "no"
deploy:
resources:
limits:
cpus: "0.25"
memory: 192m
memswap_limit: 192m
# worker: лимиты одни на все настройки профиля queue, меняются только
# concurrency и prefetch (пересоздание сервиса на ячейку)
worker:
container_name: vlad-bench-worker
image: ${BENCH_IMAGE:?run make bench-*}
restart: "no"
environment:
WORKER_CONCURRENCY: ${BENCH_WORKER_CONCURRENCY:?run make bench-*}
WORKER_PREFETCH: ${BENCH_WORKER_PREFETCH:?run make bench-*}
RENDER_MEMORY_MB: ${BENCH_WORKER_RENDER_MEMORY_MB:?run make bench-*}
deploy:
resources:
limits:
cpus: ${BENCH_WORKER_CPUS:?run make bench-*}
memory: ${BENCH_WORKER_MEMORY:?run make bench-*}
memswap_limit: ${BENCH_WORKER_MEMORY:?run make bench-*}
# Лаба 6, трек 1: сервисы телеметрии поднимает только профиль telemetry
# (bench/run.py), прочие профили их не запускают и идут с
# OTEL_SDK_DISABLED=true (bench.env). Образы, конфигурации и лимиты — из
# основного файла, как у рабочего стенда; здесь — имена и отказ от
# автоперезапуска: гибель Collector или хранилища видна прогону, а не
# прячется за рестартом. Слои вариантов (bench/otel/) подключает
# override прогона во временном каталоге, volume — свои у проекта.
otel-collector:
container_name: vlad-bench-otel
restart: "no"
prometheus:
container_name: vlad-bench-prom
restart: "no"
loki:
container_name: vlad-bench-loki
restart: "no"
tempo:
container_name: vlad-bench-tempo
restart: "no"
# единственное отличие от рабочего стенда (512M): за окна быстрого
# профиля пик 405 МиБ, а полный идёт 140 с; конфигурация Tempo та же
deploy:
resources:
limits:
memory: 768m
# Grafana не входит в путь данных и не запускается; порт сброшен на
# случай ручного up
grafana:
restart: "no"
ports: !reset []
networks:
default:
# генератор и сэмплер подключаются к сети стенда по имени
name: vlad-bench-net