Трек 5


Цель

Цель работы - уменьшить количество обращений к PostgreSQL при чтении данных чатов за счёт использования Redis и устранить избыточные запросы при одновременном обращении нескольких клиентов к одному чату.

Реализация

Для кэширования используется Redis. Данные чатов сохраняются в кэше с ограниченным временем жизни (TTL).
При получении чата приложение сначала проверяет наличие данных в кэше. Если запись найдена, данные возвращаются без обращения к PostgreSQL. При промахе кэша приложение загружает данные из PostgreSQL, сохраняет результат в Redis и возвращает его клиенту.
Для обработки конкурентных запросов используется singleflight из Go. Он объединяет одновременно выполняющиеся операции с одинаковым ключом внутри одного экземпляра приложения.

Основные файлы реализации:

internal/cache/cache.go - операции чтения и записи кэша;
internal/httpapi/chats.go - интеграция кэша с HTTP-обработчиком и использование singleflight;
internal/store/store.go - получение данных из PostgreSQL и счётчик SQL-запросов.

Проверка корректности

Для проверки используются тесты:
TestChatCache_ConcurrentRequests - конкурентные запросы к одному чату;
TestChatCache_WarmCache - повторное чтение из прогретого кэша;
TestChatCache_ReadAfterWriteAndRecovery - актуальность данных и восстановление после удаления записи из кэша.

Измерение количества SQL-запросов

Сравниваются следующие сценарии:
Прямые конкурентные вызовы GetChat без HTTP-кэша.
Конкурентные HTTP-запросы при холодном кэше.
Повторные HTTP-запросы при прогретом кэше.

Сценарий                                    Количество запросов             Число SQL-запросов
Прямые конкурентные вызовы GetChat                  50                             100

HTTP-запросы при холодном кэше                      50                              2

HTTP-запросы при прогретом кэше                     50                              0


Измерения выполняются на одной и той же тестовой конфигурации. Счётчик SQL-запросов используется для оценки нагрузки на PostgreSQL.

Команды проверки

go test ./internal/httpapi -run TestChatCache -v
go test ./...
go test -race ./...

Вывод

Реализация позволяет уменьшить число обращений к PostgreSQL при повторном чтении чатов. Использование singleflight сокращает число одинаковых конкурентных загрузок в пределах одного экземпляра приложения.