forked from mtusi2026/mtusi2026lab6
feat(telemetry, main): lab6 initialize telemetry in server, worker and reconciler
This commit is contained in:
@@ -4,6 +4,8 @@ import (
|
||||
"context"
|
||||
"errors"
|
||||
"log"
|
||||
"log/slog"
|
||||
"os"
|
||||
"os/signal"
|
||||
"syscall"
|
||||
"time"
|
||||
@@ -13,6 +15,7 @@ import (
|
||||
"high-loud-apps-labs/internal/service"
|
||||
"high-loud-apps-labs/internal/storage/postgres"
|
||||
s3store "high-loud-apps-labs/internal/storage/s3"
|
||||
"high-loud-apps-labs/internal/telemetry"
|
||||
)
|
||||
|
||||
func main() {
|
||||
@@ -26,8 +29,31 @@ func main() {
|
||||
// return
|
||||
// }
|
||||
|
||||
instanceID := os.Getenv("INSTANCE_ID")
|
||||
if instanceID == "" {
|
||||
instanceID, _ = os.Hostname()
|
||||
}
|
||||
tel, err := telemetry.Setup(context.Background(), telemetry.SetupConfig{
|
||||
ServiceName: "messenger-reconciler",
|
||||
ServiceVersion: "1.6.0",
|
||||
InstanceID: instanceID,
|
||||
Environment: "lab",
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("reconciler: телеметрия: %v", err)
|
||||
}
|
||||
defer func() {
|
||||
ctx, cancel := context.WithTimeout(context.Background(), 10*time.Second)
|
||||
defer cancel()
|
||||
if err := tel.Shutdown(ctx); err != nil {
|
||||
log.Printf("reconciler: остановка телеметрии: %v", err)
|
||||
}
|
||||
}()
|
||||
slog.SetDefault(tel.Logger)
|
||||
|
||||
if !cfg.S3Configured() {
|
||||
log.Fatal("reconciler: S3 не настроен: задайте S3_ENDPOINT, S3_BUCKET, S3_ACCESS_KEY_ID_FILE/S3_ACCESS_KEY_ID, S3_SECRET_ACCESS_KEY_FILE/S3_SECRET_ACCESS_KEY")
|
||||
slog.Error("reconciler: S3 не настроен: задайте S3_ENDPOINT, S3_BUCKET, S3_ACCESS_KEY_ID_FILE/S3_ACCESS_KEY_ID, S3_SECRET_ACCESS_KEY_FILE/S3_SECRET_ACCESS_KEY")
|
||||
os.Exit(1)
|
||||
}
|
||||
|
||||
ctx := context.Background()
|
||||
@@ -41,7 +67,8 @@ func main() {
|
||||
ConnectTimeout: 5 * time.Second,
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("reconciler: БД: %v", err)
|
||||
slog.Error("reconciler: ошибка БД", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
defer pool.Close()
|
||||
|
||||
@@ -58,9 +85,11 @@ func main() {
|
||||
if err != nil {
|
||||
var unavailable *domain.UnavailableError
|
||||
if errors.As(err, &unavailable) {
|
||||
log.Fatalf("reconciler: s3: %v (reason: %s)", err, unavailable.Reason)
|
||||
slog.Error("reconciler: ошибка s3", "error", err, "reason", unavailable.Reason)
|
||||
} else {
|
||||
slog.Error("reconciler: ошибка s3", "error", err)
|
||||
}
|
||||
log.Fatalf("reconciler: s3: %v", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
|
||||
rec := service.NewReconciler(
|
||||
@@ -74,7 +103,7 @@ func main() {
|
||||
runCtx, stop := signal.NotifyContext(ctx, syscall.SIGINT, syscall.SIGTERM)
|
||||
defer stop()
|
||||
|
||||
log.Printf("reconciler: запущен (interval=%s, grace=%s)", cfg.ReconcilerInterval, cfg.ReconcilerGracePeriod)
|
||||
slog.Info("reconciler: запущен", "interval", cfg.ReconcilerInterval, "grace", cfg.ReconcilerGracePeriod)
|
||||
rec.Run(runCtx, cfg.ReconcilerInterval)
|
||||
log.Println("reconciler: остановлен")
|
||||
slog.Info("reconciler: остановлен")
|
||||
}
|
||||
|
||||
+43
-12
@@ -5,6 +5,7 @@ import (
|
||||
"errors"
|
||||
"fmt"
|
||||
"log"
|
||||
"log/slog"
|
||||
"net/http"
|
||||
"os"
|
||||
"os/signal"
|
||||
@@ -24,6 +25,7 @@ import (
|
||||
"high-loud-apps-labs/internal/storage/postgres"
|
||||
redisstore "high-loud-apps-labs/internal/storage/redis"
|
||||
s3store "high-loud-apps-labs/internal/storage/s3"
|
||||
"high-loud-apps-labs/internal/telemetry"
|
||||
)
|
||||
|
||||
func main() {
|
||||
@@ -39,6 +41,29 @@ func main() {
|
||||
log.Fatalf("конфигурация: %v", err)
|
||||
}
|
||||
|
||||
instanceID := os.Getenv("INSTANCE_ID")
|
||||
if instanceID == "" {
|
||||
instanceID, _ = os.Hostname()
|
||||
}
|
||||
tel, err := telemetry.Setup(context.Background(), telemetry.SetupConfig{
|
||||
ServiceName: "messenger-api",
|
||||
ServiceVersion: "1.6.0",
|
||||
InstanceID: instanceID,
|
||||
Environment: "lab",
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("телеметрия: %v", err)
|
||||
}
|
||||
defer func() {
|
||||
ctx, cancel := context.WithTimeout(context.Background(), 10*time.Second)
|
||||
defer cancel()
|
||||
if err := tel.Shutdown(ctx); err != nil {
|
||||
log.Printf("остановка телеметрии: %v", err)
|
||||
}
|
||||
}()
|
||||
// Делаем логгер глобальным для всего приложения
|
||||
slog.SetDefault(tel.Logger)
|
||||
|
||||
addr := cfg.Host + ":" + cfg.Port
|
||||
|
||||
ctx := context.Background()
|
||||
@@ -51,7 +76,8 @@ func main() {
|
||||
ConnectTimeout: 5 * time.Second,
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("БД: %v", err)
|
||||
slog.Error("Ошибка подключения к БД", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
defer pool.Close()
|
||||
|
||||
@@ -59,7 +85,8 @@ func main() {
|
||||
|
||||
rabbitPub, err := broker.NewRabbitPublisher(cfg.RabbitMQURL)
|
||||
if err != nil {
|
||||
log.Fatalf("rabbitmq: %v", err)
|
||||
slog.Error("Ошибка подключения к RabbitMQ", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
defer rabbitPub.Close()
|
||||
|
||||
@@ -79,7 +106,8 @@ func main() {
|
||||
messageSvc := service.NewMessageService(store.Messages(), store.Chats(), cfg.IdempotencyTTL)
|
||||
|
||||
if !cfg.S3Configured() {
|
||||
log.Fatal("S3 не настроен: задайте S3_ENDPOINT, S3_BUCKET, S3_ACCESS_KEY_ID_FILE/S3_ACCESS_KEY_ID, S3_SECRET_ACCESS_KEY_FILE/S3_SECRET_ACCESS_KEY")
|
||||
slog.Error("S3 не настроен: задайте S3_ENDPOINT, S3_BUCKET, S3_ACCESS_KEY_ID_FILE/S3_ACCESS_KEY_ID, S3_SECRET_ACCESS_KEY_FILE/S3_SECRET_ACCESS_KEY")
|
||||
os.Exit(1)
|
||||
}
|
||||
|
||||
objectStorage, err := s3store.New(ctx, s3store.Config{
|
||||
@@ -93,9 +121,11 @@ func main() {
|
||||
if err != nil {
|
||||
var unavailable *domain.UnavailableError
|
||||
if errors.As(err, &unavailable) {
|
||||
log.Fatalf("s3: %v (reason: %s)", err, unavailable.Reason)
|
||||
slog.Error("Ошибка S3", "error", err, "reason", unavailable.Reason)
|
||||
} else {
|
||||
slog.Error("Ошибка S3", "error", err)
|
||||
}
|
||||
log.Fatalf("s3: %v", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
|
||||
attachmentSvc := service.NewAttachmentService(
|
||||
@@ -148,9 +178,10 @@ func main() {
|
||||
// }
|
||||
|
||||
go func() {
|
||||
log.Printf("Запускаем на %s (SESSION_STORE=%s, RECONCILER_ENABLED=%v)", addr, cfg.SessionStore)
|
||||
slog.Info("Запускаем сервер", "addr", addr, "session_store", cfg.SessionStore)
|
||||
if err := srv.ListenAndServe(); err != nil && !errors.Is(err, http.ErrServerClosed) {
|
||||
log.Fatalf("Ошибка запуска: %v", err)
|
||||
slog.Error("Ошибка запуска сервера", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
}()
|
||||
|
||||
@@ -158,26 +189,26 @@ func main() {
|
||||
signal.Notify(quit, syscall.SIGINT, syscall.SIGTERM)
|
||||
<-quit
|
||||
|
||||
log.Printf("Получен сигнал завершения; readiness выключен, drain %s", cfg.ShutdownDrain)
|
||||
slog.Info("Получен сигнал завершения; readiness выключен", "drain", cfg.ShutdownDrain)
|
||||
ready.Store(false)
|
||||
|
||||
outboxCancel()
|
||||
// reconcilerCancel()
|
||||
|
||||
if cfg.ShutdownDrain > 0 {
|
||||
time.Sleep(cfg.ShutdownDrain)
|
||||
}
|
||||
|
||||
log.Println("Drain завершён, останавливаем HTTP-сервер...")
|
||||
slog.Info("Drain завершён, останавливаем HTTP-сервер...")
|
||||
shutdownCtx, cancel := context.WithTimeout(context.Background(), 10*time.Second)
|
||||
defer cancel()
|
||||
if err := srv.Shutdown(shutdownCtx); err != nil {
|
||||
log.Fatalf("Ошибка при остановке: %v", err)
|
||||
slog.Error("Ошибка при остановке", "error", err)
|
||||
}
|
||||
log.Println("Сервер остановлен")
|
||||
slog.Info("Сервер остановлен")
|
||||
}
|
||||
|
||||
func runMigrate() error {
|
||||
// Пока стандартный log, поменяем потом на slog
|
||||
cfg, err := config.Load()
|
||||
if err != nil {
|
||||
return fmt.Errorf("конфигурация: %w", err)
|
||||
|
||||
@@ -4,6 +4,7 @@ import (
|
||||
"context"
|
||||
"encoding/json"
|
||||
"log"
|
||||
"log/slog"
|
||||
"os"
|
||||
"os/signal"
|
||||
"syscall"
|
||||
@@ -15,6 +16,7 @@ import (
|
||||
"high-loud-apps-labs/internal/domain"
|
||||
"high-loud-apps-labs/internal/storage/postgres"
|
||||
s3store "high-loud-apps-labs/internal/storage/s3"
|
||||
"high-loud-apps-labs/internal/telemetry"
|
||||
"high-loud-apps-labs/internal/worker"
|
||||
)
|
||||
|
||||
@@ -24,10 +26,33 @@ func main() {
|
||||
log.Fatalf("конфигурация: %v", err)
|
||||
}
|
||||
|
||||
instanceID := os.Getenv("INSTANCE_ID")
|
||||
if instanceID == "" {
|
||||
instanceID, _ = os.Hostname()
|
||||
}
|
||||
tel, err := telemetry.Setup(context.Background(), telemetry.SetupConfig{
|
||||
ServiceName: "messenger-worker",
|
||||
ServiceVersion: "1.6.0",
|
||||
InstanceID: instanceID,
|
||||
Environment: "lab",
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("телеметрия: %v", err)
|
||||
}
|
||||
defer func() {
|
||||
ctx, cancel := context.WithTimeout(context.Background(), 10*time.Second)
|
||||
defer cancel()
|
||||
if err := tel.Shutdown(ctx); err != nil {
|
||||
log.Printf("остановка телеметрии: %v", err)
|
||||
}
|
||||
}()
|
||||
slog.SetDefault(tel.Logger)
|
||||
|
||||
ctx := context.Background()
|
||||
pool, err := postgres.Connect(ctx, postgres.Config{URL: cfg.DatabaseURL})
|
||||
if err != nil {
|
||||
log.Fatalf("БД: %v", err)
|
||||
slog.Error("Ошибка подключения к БД", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
defer pool.Close()
|
||||
|
||||
@@ -41,7 +66,8 @@ func main() {
|
||||
Region: cfg.S3Region,
|
||||
})
|
||||
if err != nil {
|
||||
log.Fatalf("S3: %v", err)
|
||||
slog.Error("Ошибка подключения к S3", "error", err)
|
||||
os.Exit(1)
|
||||
}
|
||||
|
||||
pipeline := worker.NewPipeline(store.Attachments(), objectStorage, store.Variants(), store.FailedJobs(), store.Outbox())
|
||||
@@ -52,7 +78,7 @@ func main() {
|
||||
if err == nil {
|
||||
break // Нормальное завершение по сигналу
|
||||
}
|
||||
log.Printf("worker: ошибка соединения, перезапуск через 5 секунд: %v", err)
|
||||
slog.Error("Ошибка соединения worker, перезапуск через 5 секунд", "error", err)
|
||||
time.Sleep(5 * time.Second)
|
||||
}
|
||||
}
|
||||
@@ -82,7 +108,7 @@ func runWorker(ctx context.Context, cfg *config.Config, pipeline *worker.Pipelin
|
||||
return err
|
||||
}
|
||||
|
||||
log.Println("worker: запущен и слушает очередь")
|
||||
slog.Info("Worker запущен и слушает очередь")
|
||||
|
||||
quit := make(chan os.Signal, 1)
|
||||
signal.Notify(quit, syscall.SIGINT, syscall.SIGTERM)
|
||||
@@ -90,7 +116,7 @@ func runWorker(ctx context.Context, cfg *config.Config, pipeline *worker.Pipelin
|
||||
for {
|
||||
select {
|
||||
case <-quit:
|
||||
log.Println("worker: получен сигнал завершения, останавливаемся...")
|
||||
slog.Info("Worker получил сигнал завершения, останавливаемся...")
|
||||
return nil
|
||||
case d, ok := <-msgs:
|
||||
if !ok {
|
||||
@@ -98,12 +124,12 @@ func runWorker(ctx context.Context, cfg *config.Config, pipeline *worker.Pipelin
|
||||
}
|
||||
var msg domain.JobMessage
|
||||
if err := json.Unmarshal(d.Body, &msg); err != nil {
|
||||
log.Printf("worker: битое сообщение: %v", err)
|
||||
slog.Error("Worker получил битое сообщение", "error", err)
|
||||
_ = d.Nack(false, false)
|
||||
continue
|
||||
}
|
||||
if err := pipeline.Process(ctx, msg.AttachmentID, msg.PipelineVersion); err != nil {
|
||||
log.Printf("worker: ошибка %s: %v", msg.AttachmentID, err)
|
||||
slog.Error("Ошибка обработки задачи", "attachment_id", msg.AttachmentID, "error", err)
|
||||
_ = d.Nack(false, true)
|
||||
} else {
|
||||
_ = d.Ack(false)
|
||||
|
||||
Reference in New Issue
Block a user