#!/usr/bin/env bash # Сэмплер стенда трека 1 (решение 7 design change scaling-bench). Работает # только внутри контейнера mtusi-bench-sampler (образ PostgreSQL стенда, # --cgroupns host, сеть mtusi-bench), не на хосте: его запускает # bench/run.py (Stand.start_sampler). Раз в интервал пишет в # /work/samples.log строки с отметкой часов ВМ в наносекундах: # cg <нс> <роль> # # cg <нс> <роль> missing — нет каталога cgroup # vm <нс> <занято jiffies> <всего jiffies> # lb <нс> # <заголовок CSV статистики HAProxy> / lb <нс> api,<строка> # lb <нс> missing — статистика недоступна # В фоне psql с \watch пишет /work/pg-samples.log (одно соединение на всю # ячейку): act, db, wal, io — разбор в bench/scaling.py (parse_samples). # Аргументы: <интервал, с> <роль>=<полный id контейнера>… set -u interval=$1 shift roles=() ids=() for arg in "$@"; do roles+=("${arg%%=*}") ids+=("${arg#*=}") done export PGPASSWORD="$POSTGRES_PASSWORD" psql "host=postgres user=$POSTGRES_USER dbname=$POSTGRES_DB \ application_name=bench-sampler" -XAtq -F '|' >/work/pg-samples.log 2>&1 < pg_backend_pid() GROUP BY 3, 4, 5, 6 UNION ALL SELECT 'db', (SELECT ts FROM t), xact_commit::text, xact_rollback::text, sessions::text, sessions_fatal::text, numbackends::bigint FROM pg_stat_database WHERE datname = current_database() UNION ALL SELECT 'wal', (SELECT ts FROM t), wal_records::text, wal_fpi::text, wal_bytes::text, NULL, NULL FROM pg_stat_wal UNION ALL SELECT 'io', (SELECT ts FROM t), coalesce(sum(writes), 0)::text, coalesce(sum(fsyncs), 0)::text, NULL, NULL, NULL FROM pg_stat_io WHERE object = 'wal' \watch $interval SQL exec 4>>/work/samples.log cg_line() { local role=$1 id=$2 dir=/sys/fs/cgroup/docker/$2 local key val usage=0 periods=0 throttled=0 thr_usec=0 mem=0 psi=0 rest if [[ ! -r $dir/cpu.stat ]]; then printf 'cg %s %s %s missing\n' "$ns" "$role" "${id:0:12}" >&4 return fi while read -r key val; do case $key in usage_usec) usage=$val ;; nr_periods) periods=$val ;; nr_throttled) throttled=$val ;; throttled_usec) thr_usec=$val ;; esac done <"$dir/cpu.stat" read -r mem <"$dir/memory.current" read -r _ _ _ _ rest <"$dir/cpu.pressure" psi=${rest#total=} printf 'cg %s %s %s %s %s %s %s %s %s\n' "$ns" "$role" "${id:0:12}" \ "$usage" "$periods" "$throttled" "$thr_usec" "$mem" "$psi" >&4 } vm_line() { local _cpu user nice system idle iowait irq softirq steal rest total read -r _cpu user nice system idle iowait irq softirq steal rest &4 } lb_lines() { local line if ! exec 3<>/dev/tcp/haproxy/8404 2>/dev/null; then printf 'lb %s missing\n' "$ns" >&4 return fi printf 'GET /stats;csv HTTP/1.0\r\n\r\n' >&3 while IFS= read -r line; do line=${line%$'\r'} case $line in "# "* | api,*) printf 'lb %s %s\n' "$ns" "$line" >&4 ;; esac done <&3 exec 3<&- } while :; do # EPOCHREALTIME bash 5 — часы ВМ без запуска date ns=${EPOCHREALTIME/./}000 for i in "${!ids[@]}"; do cg_line "${roles[$i]}" "${ids[$i]}" done vm_line lb_lines sleep "$interval" done