forked from mtusi2026/mtusi2026lab2
feat:some_improvement
This commit is contained in:
@@ -0,0 +1,14 @@
|
||||
#!/bin/sh
|
||||
set -eu
|
||||
# Логический backup БД messenger в файл на хосте.
|
||||
# Формат custom (-Fc) позволяет pg_restore с параллелизмом.
|
||||
OUT_DIR="${1:-evidence}"
|
||||
mkdir -p "$OUT_DIR"
|
||||
STAMP=$(date -u +%Y%m%dT%H%M%SZ)
|
||||
FILE="$OUT_DIR/lab2_track2_backup_${STAMP}.dump"
|
||||
|
||||
docker compose --env-file .env exec -T postgres \
|
||||
pg_dump -U messenger -d messenger -Fc \
|
||||
> "$FILE"
|
||||
|
||||
echo "$FILE"
|
||||
@@ -0,0 +1,10 @@
|
||||
\timing on
|
||||
-- 10 000 вставок в один чат.
|
||||
INSERT INTO messages (id, chat_id, sender_id, text, created_at)
|
||||
SELECT
|
||||
gen_random_uuid(),
|
||||
(SELECT id FROM chats ORDER BY created_at LIMIT 1),
|
||||
(SELECT id FROM users ORDER BY created_at LIMIT 1),
|
||||
'bench ' || g,
|
||||
now() - (g || ' milliseconds')::interval
|
||||
FROM generate_series(1, 10000) g;
|
||||
@@ -0,0 +1,8 @@
|
||||
-- План чтения по «узкому» индексу (baseline). text достаётся через heap.
|
||||
EXPLAIN (ANALYZE, BUFFERS, FORMAT TEXT)
|
||||
SELECT id, chat_id, sender_id, text, created_at
|
||||
FROM messages
|
||||
WHERE chat_id = (SELECT id FROM chats ORDER BY created_at LIMIT 1)
|
||||
AND (created_at, id) > ('2000-01-01T00:00:00Z', '00000000-0000-0000-0000-000000000000')
|
||||
ORDER BY created_at, id
|
||||
LIMIT 51;
|
||||
@@ -0,0 +1,9 @@
|
||||
-- Тот же запрос, но planner имеет выбор: узкий vs покрывающий индекс.
|
||||
-- После VACUUM ANALYZE PostgreSQL может выбрать Index Only Scan.
|
||||
EXPLAIN (ANALYZE, BUFFERS, FORMAT TEXT)
|
||||
SELECT id, chat_id, sender_id, text, created_at
|
||||
FROM messages
|
||||
WHERE chat_id = (SELECT id FROM chats ORDER BY created_at LIMIT 1)
|
||||
AND (created_at, id) > ('2000-01-01T00:00:00Z', '00000000-0000-0000-0000-000000000000')
|
||||
ORDER BY created_at, id
|
||||
LIMIT 51;
|
||||
@@ -0,0 +1,16 @@
|
||||
#!/bin/sh
|
||||
set -eu
|
||||
# Восстанавливает дамп в НОВУЮ БД messenger_restore на том же инстансе
|
||||
# (учебный компромисс: физически это тот же PostgreSQL-контейнер,
|
||||
# но логически — другое хранилище).
|
||||
DUMP="$1"
|
||||
[ -f "$DUMP" ] || { echo "no dump: $DUMP" >&2; exit 2; }
|
||||
|
||||
docker compose --env-file .env exec -T postgres \
|
||||
psql -U messenger -d postgres -c "DROP DATABASE IF EXISTS messenger_restore;"
|
||||
docker compose --env-file .env exec -T postgres \
|
||||
psql -U messenger -d postgres -c "CREATE DATABASE messenger_restore OWNER messenger;"
|
||||
|
||||
docker compose --env-file .env exec -T postgres \
|
||||
pg_restore -U messenger -d messenger_restore --no-owner --no-privileges < "$DUMP"
|
||||
echo "restored into messenger_restore"
|
||||
@@ -0,0 +1,23 @@
|
||||
#!/bin/sh
|
||||
# Запускает собственные проверки lab2:
|
||||
# 1) student_tests/lab2_expiry.py — короткий TTL, .env правится самим тестом;
|
||||
# 2) student_tests/lab2_extra.py — все остальные сценарии.
|
||||
# Первый шаг возвращает .env в исходное состояние до запуска второго.
|
||||
set -eu
|
||||
|
||||
PYTHON="${PYTHON:-python3}"
|
||||
BASE_URL="${BASE_URL:-http://localhost:8080}"
|
||||
TMP_TTL="${TMP_TTL:-2}"
|
||||
COMPOSE_ENV_FILE="${COMPOSE_ENV_FILE:-.env}"
|
||||
COMPOSE_FILE="${COMPOSE_FILE:-compose.yaml}"
|
||||
|
||||
export COMPOSE_ENV_FILE COMPOSE_FILE
|
||||
export PYTHON
|
||||
|
||||
echo "=== student_tests/lab2_expiry.py (SESSION_TTL_SECONDS=$TMP_TTL) ==="
|
||||
"$PYTHON" student_tests/lab2_expiry.py \
|
||||
--base-url "$BASE_URL" --ttl "$TMP_TTL"
|
||||
|
||||
echo "=== student_tests/lab2_extra.py ==="
|
||||
"$PYTHON" student_tests/lab2_extra.py \
|
||||
--base-url "$BASE_URL"
|
||||
@@ -0,0 +1,63 @@
|
||||
-- Синтетический датасет: 150 000 сообщений, неравномерное распределение по чатам.
|
||||
-- Требует уже существующих пользователей и хотя бы одного чата;
|
||||
-- создаёт дополнительные чаты и membership по необходимости.
|
||||
|
||||
DO $$
|
||||
DECLARE
|
||||
n_users CONSTANT int := 50;
|
||||
n_chats CONSTANT int := 200;
|
||||
n_messages CONSTANT int := 150000;
|
||||
hot_chats CONSTANT int := 5;
|
||||
i int;
|
||||
uid uuid;
|
||||
cid uuid;
|
||||
chosen_chat uuid;
|
||||
chosen_sender uuid;
|
||||
r double precision;
|
||||
uname text;
|
||||
users_arr uuid[];
|
||||
chats_arr uuid[];
|
||||
BEGIN
|
||||
-- Пользователи
|
||||
FOR i IN 1..n_users LOOP
|
||||
uid := gen_random_uuid();
|
||||
uname := 'seed_u_' || i;
|
||||
INSERT INTO users (id, username, display_name, password_hash)
|
||||
VALUES (uid, uname, 'Seed ' || i, '$2a$10$invalidinvalidinvalidinvalidinvalidinvali')
|
||||
ON CONFLICT (username) DO NOTHING;
|
||||
users_arr := array_append(users_arr, uid);
|
||||
END LOOP;
|
||||
|
||||
-- Чаты (равномерно по пользователям, все участники — выборка из users_arr)
|
||||
FOR i IN 1..n_chats LOOP
|
||||
cid := gen_random_uuid();
|
||||
INSERT INTO chats (id, title) VALUES (cid, 'seed chat ' || i);
|
||||
INSERT INTO chat_members (chat_id, user_id)
|
||||
SELECT cid, unnest(users_arr[1 + (i % n_users) : 1 + ((i + 4) % n_users)])
|
||||
ON CONFLICT DO NOTHING;
|
||||
chats_arr := array_append(chats_arr, cid);
|
||||
END LOOP;
|
||||
|
||||
-- Сообщения: 80% идут в 5 «горячих» чатов, 20% — равномерно по остальным.
|
||||
FOR i IN 1..n_messages LOOP
|
||||
r := random();
|
||||
IF r < 0.80 THEN
|
||||
chosen_chat := chats_arr[1 + (i % hot_chats)];
|
||||
ELSE
|
||||
chosen_chat := chats_arr[1 + (i % n_chats)];
|
||||
END IF;
|
||||
chosen_sender := users_arr[1 + (i % n_users)];
|
||||
|
||||
INSERT INTO messages (id, chat_id, sender_id, text, created_at)
|
||||
VALUES (
|
||||
gen_random_uuid(),
|
||||
chosen_chat,
|
||||
chosen_sender,
|
||||
'seed message ' || i || ' ' || repeat('x', 1 + (i % 200)),
|
||||
-- Разные timestamps: сдвигаем на i миллисекунд назад от now().
|
||||
now() - (i || ' milliseconds')::interval
|
||||
);
|
||||
END LOOP;
|
||||
|
||||
RAISE NOTICE 'seeded % messages across % chats', n_messages, n_chats;
|
||||
END $$;
|
||||
@@ -0,0 +1,13 @@
|
||||
-- Сверка: count + контрольные сообщения.
|
||||
SELECT 'src' AS side, count(*) AS messages FROM messages
|
||||
UNION ALL
|
||||
SELECT 'restore', count(*) FROM dblink(
|
||||
'dbname=messenger_restore user=messenger',
|
||||
'SELECT count(*) FROM messages'
|
||||
) AS t(n bigint);
|
||||
|
||||
-- Контрольные UUID: 5 самых старых сообщений.
|
||||
SELECT id, chat_id, sender_id, text, created_at
|
||||
FROM messages
|
||||
ORDER BY created_at, id
|
||||
LIMIT 5;
|
||||
Reference in New Issue
Block a user