Lot 1 : catalogue PostgreSQL partagé pour les métadonnées et les partages

- Nouveau paquet internal/catalog : pool pgx, migrations SQL embarquées
  (sérialisées entre instances par verrou consultatif), transactions
  rejouées après conflit, interblocage ou bascule du primaire (pool vidé
  sur erreur de lecture seule ou de connexion). DSN multi-hôtes accepté
  (target_session_attrs=read-write) pour une future HA.
- Store.UseCatalog : tags, icônes, auteurs (item_meta) et liens de partage
  (shares) lus et écrits en base ; chaque modification se fait sous verrou
  consultatif par racine (« main », « home/<id> »), donc sans perte
  d'écriture entre instances. Sans DATABASE_URL, rien ne change (JSON).
- Reprise unique de .meta.json et .shares.json au premier branchement
  (table imports), fichiers renommés en *.imported.
- Serveur : DATABASE_URL / DATABASE_URL_FILE, DATABASE_WAIT (60 s).
- Compose : service postgres:16 sur un réseau interne dédié ; Traefik
  inchangé. Dockerfile : go.sum et téléchargement des modules.
- Tests : UPANDOWN_TEST_DATABASE_URL fait passer toute la suite storage par
  la base ; tests de partage entre deux instances et de reprise JSON.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01LNfwm4pfYR9C914C2EeiuB
This commit is contained in:
claude BotandClaude Opus 5.5 committed 2026-11-20 17:20:16 +01:00
1 parent 68885f7e6b
commit f8801f00f9
16 files changed
+306 -110

No files matched your search

+28
View File
@@ -20,6 +20,7 @@ import (
"github.com/vblogio/upandown/internal/api"
"github.com/vblogio/upandown/internal/auth"
"github.com/vblogio/upandown/internal/catalog"
"github.com/vblogio/upandown/internal/storage"
"github.com/vblogio/upandown/internal/tokens"
"github.com/vblogio/upandown/web"
@@ -65,6 +66,19 @@ func fatal(msg string, args ...any) {
os.Exit(1)
}
// envDuration lit une durée (« 30s », « 2m »).
func envDuration(key string, def time.Duration) time.Duration {
v := os.Getenv(key)
if v == "" {
return def
}
d, err := time.ParseDuration(v)
if err != nil || d < 0 {
fatal(key + " invalide (durée attendue, ex. 60s)")
}
return d
}
// secretEnv lit un secret dans NAME, ou dans le fichier NAME_FILE (secrets Docker).
func secretEnv(name string) string {
if v := os.Getenv(name); v != "" {
@@ -118,6 +132,20 @@ func main() {
defer stop()
spaces := storage.NewSpaces(store)
// Catalogue PostgreSQL partagé (mode cluster) : DATABASE_URL ou DATABASE_URL_FILE.
// Sans lui, les métadonnées restent dans les fichiers JSON de DATA_DIR.
if dsn := secretEnv("DATABASE_URL"); dsn != "" {
db, err := catalog.Open(ctx, dsn, envDuration("DATABASE_WAIT", 60*time.Second))
if err != nil {
fatal("catalogue PostgreSQL", "err", err)
}
defer db.Close()
if err := store.UseCatalog(db, "main"); err != nil {
fatal("catalogue PostgreSQL", "err", err)
}
spaces.Catalog = db
slog.Info("catalogue PostgreSQL branché")
}
spaces.MaxUpload = envInt("MAX_UPLOAD_MB", 0) << 20 // 0 : illimité
mode := strings.ToLower(env("AUTH_MODE", "local"))