Aller au contenu principal

AFFiNE sur Google Cloud Run

AFFiNE sur Google Cloud Run

AFFiNE est une base de connaissances open source, centrée sur la confidentialité, qui réunit documents, tableaux blancs et bases de données dans un même espace de travail — une alternative auto-hébergeable à Notion et Miro. Ce module déploie AFFiNE sur Cloud Run v2, au-dessus du socle App_CloudRun, qui provisionne et gère l'infrastructure Google Cloud partagée.

Ce guide se concentre sur les services cloud qu'utilise AFFiNE et sur la manière de les explorer et de les exploiter depuis la console Google Cloud et la ligne de commande. Pour les mécanismes communs à toutes les applications Cloud Run — identité du service, ingress et équilibrage de charge, mise à l'échelle et concurrence, CI/CD, Cloud Armor, IAP, Binary Authorization, VPC Service Controls, sauvegardes et cycle de vie du déploiement — reportez-vous au guide du socle App_CloudRun plutôt que de les répéter ici.


1. Vue d'ensemble​

Le serveur auto-hébergé d'AFFiNE s'exécute comme un conteneur Node.js unique sur Cloud Run v2. Le déploiement assemble un ensemble ciblé de services Google Cloud :

FonctionnalitéService Google CloudRemarques
CalculCloud Run v2Service Node.js, 2 vCPU / 4 GiB par défaut, instance unique toujours active
Base de donnéesCloud SQL for PostgreSQL 15Obligatoire — AFFiNE ne prend pas en charge MySQL (vérifié au moment du plan)
Collaboration en temps réelRedisObligatoire — pub/sub de synchronisation des documents Yjs et file de jobs ; l'hôte NFS héberge aussi le Redis par défaut
Stockage des blobsFilestore / NFSPièces jointes téléversées conservées dans /root/.affine/storage (gen2 requis)
Stockage d'objetsCloud StorageUn bucket storage dédié provisionné automatiquement
SecretsSecret ManagerMot de passe de la base de données géré automatiquement ; AFFiNE n'a besoin d'aucun secret applicatif
Image de conteneurCloud Build + Artifact RegistryBuild personnalisé léger au-dessus de ghcr.io/toeverything/affine
IngressURL Cloud Run / Cloud Load BalancingURL run.app par défaut, équilibreur de charge HTTPS externe + domaine personnalisé en option

Valeurs par défaut judicieuses à connaître d'emblée :

  • PostgreSQL 15 est obligatoire. Une validation au moment du plan limite database_type aux versions de PostgreSQL ; MySQL est rejeté.
  • Redis est obligatoire. Une validation au moment du plan fait échouer le déploiement si enable_redis = false. Sans redis_host explicite, l'IP du serveur NFS est utilisée comme point de terminaison Redis.
  • Instance unique par conception. min_instance_count = 1, max_instance_count = 1, cpu_always_allocated = true — les WebSockets de collaboration en temps réel doivent rester accessibles et alimentés en CPU, et l'état de collaboration propre à chaque processus ainsi que les blobs sur le système de fichiers rendent la mise à l'échelle horizontale dangereuse.
  • Pas de socket Cloud SQL. enable_cloudsql_volume = false : AFFiNE utilise un DATABASE_URL de type URL-authority qui ne peut pas contenir les deux-points du chemin du socket ; le point d'entrée se connecte donc via l'IP privée de l'instance avec sslmode=require.
  • Deux jobs d'initialisation à l'application. db-init crée de manière idempotente la base de données et l'utilisateur ; affine-migrate exécute le self-host-predeploy d'AFFiNE (migration du schéma + génération de la clé de signature) avant le démarrage du serveur.
  • Aucun secret applicatif. AFFiNE conserve sa propre clé de signature dans PostgreSQL lors de la migration ; seul le mot de passe de la base de données généré automatiquement réside dans Secret Manager.
  • Les sondes de santé ciblent / — AFFiNE renvoie HTTP 200 sur son chemin racine une fois prêt.
  • application_version = "latest" correspond à stable — AFFiNE ne publie pas de tag d'image latest.
  • La recherche plein texte/vectorielle est désactivée (AFFINE_INDEXER_ENABLED = "false") — l'indexeur nécessite un backend vectoriel qui n'est pas provisionné ici.

2. Services Google Cloud et comment les explorer​

Toutes les commandes supposent que PROJECT et REGION sont définis. Les noms du service et des ressources figurent dans les sorties du déploiement.

A. Cloud Run — le service AFFiNE​

AFFiNE s'exécute comme un service Cloud Run v2 épinglé sur une instance unique toujours active. Chaque déploiement crée une révision immuable ; le trafic bascule vers la plus récente qui est saine.

  • Console : Cloud Run → sélectionnez le service pour voir les révisions, le trafic, les journaux et les métriques.
  • CLI :
    gcloud run services list --project "$PROJECT" --region "$REGION"
    gcloud run services describe <service-name> --project "$PROJECT" --region "$REGION"
    gcloud run revisions list --service <service-name> --project "$PROJECT" --region "$REGION"

Consultez App_CloudRun pour la mise à l'échelle, la concurrence, l'environnement d'exécution et la répartition du trafic.

B. Cloud SQL for PostgreSQL 15​

AFFiNE stocke les espaces de travail, les documents, les utilisateurs et sa propre clé de signature dans une instance gérée Cloud SQL for PostgreSQL 15. Comme le DATABASE_URL d'AFFiNE est un DSN de type URL-authority, le service se connecte via l'IP privée avec TLS (sslmode=require) plutôt que par le socket de l'Auth Proxy. Au premier déploiement, le job db-init crée la base de données et l'utilisateur de l'application, puis affine-migrate crée le schéma.

  • Console : SQL → sélectionnez l'instance pour voir les connexions, les sauvegardes, les flags et les métriques.
  • CLI :
    gcloud sql instances list --project "$PROJECT"
    gcloud sql instances describe <instance-name> --project "$PROJECT"
    gcloud sql connect <instance-name> --user=<db-user> --project "$PROJECT"

Le nom de l'instance, la base de données, l'utilisateur et le secret du mot de passe figurent dans les sorties. Consultez App_CloudRun pour le modèle de connexion, les sauvegardes et la rotation des mots de passe.

C. Redis — collaboration en temps réel​

Redis porte le pub/sub de synchronisation des documents Yjs d'AFFiNE et sa file de jobs en arrière-plan — le déploiement refuse de produire un plan sans lui. Lorsqu'aucun redis_host externe n'est configuré, le Redis hébergé sur le serveur NFS partagé est utilisé automatiquement.

  • Console : Memorystore → Redis (si vous utilisez une instance gérée) ; Compute Engine → VM instances (l'hôte NFS/Redis).
  • CLI :
    redis-cli -h <redis-host> ping
    redis-cli -h <redis-host> info clients

D. Filestore (NFS) et Cloud Storage​

Les blobs téléversés (images, pièces jointes, fichiers intégrés) sont écrits sur un partage NFS monté sur /root/.affine/storage, afin de survivre aux révisions et aux redémarrages. Un bucket Cloud Storage dédié (suffixe storage) est également provisionné automatiquement. L'environnement d'exécution gen2 est requis pour les montages NFS.

  • Console : Filestore → Instances (ou Compute Engine → VM instances pour la VM NFS autogérée) ; Cloud Storage → Buckets.
  • CLI :
    gcloud filestore instances list --project "$PROJECT"
    gcloud storage buckets list --project "$PROJECT"
    gcloud storage ls gs://<storage-bucket>/ # bucket name is in the Outputs

Consultez App_CloudRun pour le montage NFS, GCS Fuse et CMEK.

E. Secret Manager​

Le mot de passe de la base de données généré automatiquement est le seul secret — AFFiNE génère et stocke sa clé de signature dans PostgreSQL pendant le job affine-migrate ; il n'existe donc aucun secret applicatif à gérer ou à faire tourner.

  • Console : Security → Secret Manager.
  • CLI :
    gcloud secrets list --project "$PROJECT"
    gcloud secrets versions access latest --secret=<secret-name> --project "$PROJECT"

Consultez App_CloudRun pour les détails d'injection et de rotation.

F. Réseau et entrée​

Le service est accessible par défaut à son URL run.app. Un équilibreur de charge HTTPS externe avec domaine personnalisé, Cloud CDN et Cloud Armor peut être ajouté ; les paramètres d'ingress et la sortie VPC contrôlent la connectivité. Le point d'entrée cloud définit par défaut AFFINE_SERVER_EXTERNAL_URL sur l'URL du service injectée, afin que les invitations et les liens de partage se résolvent correctement.

  • Console : Cloud Run (URL du service) ; Network services → Load balancing.
  • CLI :
    gcloud run services describe <service-name> --region "$REGION" --format='value(status.url)'
    gcloud compute addresses list --project "$PROJECT"

Consultez App_CloudRun.

G. Cloud Logging et Monitoring​

Les journaux des conteneurs sont envoyés à Cloud Logging ; les métriques Cloud Run et Cloud SQL sont envoyées à Cloud Monitoring, avec des tests de disponibilité et des règles d'alerte en option.

  • Console : Logging → Logs Explorer ; Monitoring → Dashboards / Alerting.
  • CLI :
    gcloud run services logs read <service-name> --project "$PROJECT" --region "$REGION" --limit 50

3. Comportement de l'application AFFiNE​

  • Configuration de la base de données en deux étapes. À l'application, db-init (image postgres:15-alpine) crée de manière idempotente le rôle et la base de données AFFiNE, accorde les privilèges et tente d'accorder cloudsqlsuperuser afin que les migrations puissent exécuter CREATE EXTENSION. Ensuite, affine-migrate exécute node ./scripts/self-host-predeploy d'AFFiNE à l'aide de l'image applicative construite — migration idempotente du schéma et génération de la clé de signature. Les deux peuvent être réexécutés sans risque ; affine-migrate effectue jusqu'à 3 tentatives.
  • La clé de signature réside dans la base de données. Contrairement à la plupart des applications, il n'y a pas de variable d'environnement de type APP_SECRET : la clé générée par self-host-predeploy est conservée dans PostgreSQL, de sorte que le déploiement ne porte aucun secret applicatif susceptible de se désynchroniser ou à faire tourner.
  • Assemblage du DSN au démarrage. Le point d'entrée cloud construit DATABASE_URL à partir des variables DB_* injectées par le socle (en encodant les identifiants pour l'URL) et associe REDIS_HOST/PORT/AUTH aux REDIS_SERVER_* d'AFFiNE. Sur Cloud Run, il se connecte à l'IP privée de Cloud SQL avec sslmode=require ; une variable d'environnement DATABASE_URL prédéfinie est prioritaire.
  • URL externe. AFFINE_SERVER_EXTERNAL_URL vaut par défaut l'URL du service Cloud Run. Définissez-la explicitement (via environment_variables) une fois un domaine personnalisé en service, afin que les liens de partage et les e-mails d'invitation utilisent le bon hôte.
  • Configuration du premier lancement. Ouvrez l'URL du service et créez le premier compte — sur une nouvelle instance AFFiNE auto-hébergée, le premier utilisateur inscrit devient l'administrateur du serveur, et le panneau d'administration se trouve à <url>/admin.
  • Chemin de santé. Les sondes de démarrage, de vivacité et de disponibilité (readiness) ciblent /, qui renvoie HTTP 200 une fois le serveur prêt (fenêtre de démarrage : délai initial de 60 s + jusqu'à 30 × 15 s).
  • Contrainte de mise à l'échelle. Le service est épinglé sur exactement une instance toujours active. Les blobs sur le système de fichiers NFS et l'état Yjs propre à chaque processus rendent plusieurs instances dangereuses ; procédez plutôt à une mise à l'échelle verticale (cpu_limit / memory_limit).
  • Vérification :
    SERVICE=$(gcloud run services list --project "$PROJECT" --region "$REGION" \
    --filter="metadata.name~affine" --format="value(metadata.name)" --limit=1)
    SERVICE_URL=$(gcloud run services describe "$SERVICE" --project "$PROJECT" \
    --region "$REGION" --format="value(status.url)")
    curl -s -o /dev/null -w "%{http_code}\n" "$SERVICE_URL/" # expect 200

4. Variables de configuration​

Les variables sont regroupées exactement comme elles apparaissent sur la plateforme de déploiement. Seuls les paramètres propres à AFFiNE ou notables pour lui sont listés ; toutes les autres entrées sont héritées d'App_CloudRun avec leur comportement standard.

Groupe 1 — Projet et identité​

VariableValeur par défautDescription
project_id(obligatoire)Projet Google Cloud cible.
regionus-central1Région du service et des ressources régionales.

Groupe 2 — Environnement de déploiement​

VariableValeur par défautDescription
tenant_iddemoSuffixe court qui rend les noms de ressources uniques par environnement.
support_users[]Adresses e-mail auxquelles sont accordés l'accès IAM et les alertes de surveillance.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 3 — Identité de l'application​

VariableValeur par défautDescription
application_nameaffineNom de base des ressources. Ne pas modifier après le premier déploiement.
application_versionstableTag d'image pour ghcr.io/toeverything/affine ; latest correspond à stable. Incrémentez-le pour déclencher un nouveau build et une nouvelle révision.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 4 — Exécution et mise à l'échelle​

VariableValeur par défautDescription
cpu_limit / memory_limit2000m / 4GiAFFiNE a besoin d'au moins 2Gi pour fonctionner de manière fiable.
container_port3010Port natif du serveur auto-hébergé d'AFFiNE.
min_instance_count1Garde le serveur WebSocket de collaboration toujours accessible — la mise à l'échelle jusqu'à zéro interrompt les sessions d'édition en direct.
max_instance_count1Épinglé. Les blobs sur le système de fichiers + l'état de collaboration propre à chaque processus rendent la mise à l'échelle horizontale dangereuse.
cpu_always_allocatedtrueLa synchronisation Yjs par WebSocket est privée de CPU avec la limitation du CPU basée sur les requêtes — conservez true pour un éditeur collaboratif en direct.
enable_cloudsql_volumefalseLe DATABASE_URL de type URL-authority d'AFFiNE ne peut pas contenir le chemin du socket Cloud SQL ; le point d'entrée utilise l'IP privée avec sslmode=require.
container_image_sourcecustomLe build d'encapsulation léger fournit le point d'entrée cloud — obligatoire.
execution_environmentgen2Requis pour le montage NFS.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 6 — Variables d'environnement et secrets​

VariableValeur par défautDescription
environment_variables{}Fusionnées par-dessus les valeurs par défaut d'Affine_Common (NODE_ENV, AFFINE_SERVER_HOST/PORT, AFFINE_CONFIG_PATH, AFFINE_INDEXER_ENABLED=false). Ne définissez jamais PORT — c'est un nom réservé de Cloud Run qui fait échouer la création des Jobs.
secret_environment_variables{}AFFiNE n'a besoin d'aucun secret applicatif par défaut.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 11 — Stockage et système de fichiers​

VariableValeur par défautDescription
enable_nfstrueStockage des blobs et hôte Redis par défaut. Conservez true sauf si un redis_host externe est fourni.
nfs_mount_path/root/.affine/storageEmplacement où AFFiNE conserve les blobs téléversés.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun. Le bucket GCS storage est toujours provisionné par Affine_Common.

Groupe 12 — Backend de base de données​

VariableValeur par défautDescription
database_typePOSTGRES_15AFFiNE nécessite PostgreSQL — MySQL est rejeté au moment du plan.
db_name / db_useraffine / affineImmuables après le premier déploiement.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 13 — Jobs et tâches planifiées​

VariableValeur par défautDescription
initialization_jobs[]Laissez vide pour utiliser les jobs intégrés db-init (postgres:15-alpine) + affine-migrate (image applicative construite).

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 14 — Observabilité et santé​

VariableValeur par défautDescription
startup_probeHTTP /, délai de 60 s, 30 échecsFenêtre généreuse pour le premier démarrage.
liveness_probeHTTP /, délai de 60 sLe chemin racine renvoie 200 une fois prêt.
uptime_check_configdésactivé, chemin /Test de disponibilité Cloud Monitoring.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 21 — Redis​

VariableValeur par défautDescription
enable_redistrueObligatoire — la validation au moment du plan rejette false. Pub/sub Yjs + file de jobs.
redis_host""Laissez vide pour utiliser l'IP de l'hôte NFS.

Toutes les autres entrées suivent le comportement standard d'App_CloudRun.

Groupe 22 — VPC Service Controls​

Toutes les entrées suivent le comportement standard d'App_CloudRun (enable_vpc_sc, vpc_cidr_ranges, vpc_sc_dry_run, organization_id, enable_audit_logging).


5. Sorties​

Renvoyées lors d'un déploiement réussi — le moyen le plus rapide de localiser et d'explorer les ressources en cours d'exécution.

SortieDescription
service_nameNom du service Cloud Run.
service_urlURL run.app par défaut du service.
service_locationRégion dans laquelle s'exécute le service.
stage_servicesURL des services propres à chaque étape (Cloud Deploy).
load_balancer_ip / load_balancer_urlIP / URL de l'équilibreur de charge HTTPS externe (lorsqu'il est activé).
database_instance_nameNom de l'instance Cloud SQL.
database_name / database_userNom / utilisateur de la base de données de l'application.
database_password_secretSecret Secret Manager contenant le mot de passe de la base de données.
database_host / database_portPoint de terminaison / port de la base de données (l'hôte est sensible).
storage_bucketsBuckets Cloud Storage créés (y compris le bucket AFFiNE storage).
network_name / network_exists / regionsRéseau VPC, présence, régions.
container_image / container_registryImage déployée et dépôt Artifact Registry.
monitoring_enabled / monitoring_notification_channels / uptime_check_namesÉtat de la surveillance, canaux, tests de disponibilité.
initialization_jobsNoms des jobs de configuration (db-init, affine-migrate).
deployment_id / tenant_id / resource_prefixIdentifiants de nommage.
project_id / project_numberIdentifiants du projet.
cicd_enabled / github_repository_url / github_repository_owner / github_repository_name / cicd_configurationÉtat et détails du CI/CD.
artifact_registry_repository / cloudbuild_trigger_name / cloudbuild_trigger_idRegistre et déclencheur de build.
vpc_sc_enabled / vpc_sc_perimeter_name / vpc_sc_dry_run_modeÉtat de VPC-SC.
audit_logging_enabled / artifact_registry_cmek_enabledÉtat de la journalisation d'audit et de CMEK.

6. Pièges de configuration et valeurs par défaut judicieuses​

Une validation croisée des variables s'exécute au moment du plan (validation.tf) : elle impose PostgreSQL, un Redis obligatoire avec un hôte résolvable, des nombres d'instances min ≤ max, et rejette un volume Cloud SQL avec database_type = "NONE" — les erreurs de configuration échouent rapidement au lieu de produire un déploiement défectueux.

Risque : Critique (perte de données / panne / sécurité) — Élevé (service dégradé) — Moyen (coût ou dégradation partielle) — Faible (mineur).

ParamètreValeur judicieuseRisqueConséquence en cas d'erreur
database_typePOSTGRES_15CritiqueAFFiNE nécessite PostgreSQL ; MySQL est rejeté au moment du plan.
db_name / db_userà définir une seule foisCritiqueImmuables après le premier déploiement ; les renommer recrée la base de données/l'utilisateur et détruit tous les espaces de travail.
enable_redistrueCritiqueObligatoire — la collaboration en temps réel et la file de jobs ont besoin de Redis ; false fait échouer le plan.
redis_host"" (NFS) ou expliciteCritiqueRedis activé avec NFS désactivé et aucun hôte défini fait échouer la validation ; un hôte erroné casse la synchronisation des documents à l'exécution.
enable_nfstrueCritiqueSans NFS, les blobs téléversés atterrissent sur un disque éphémère et disparaissent à chaque révision/redémarrage — et l'hôte Redis par défaut disparaît.
container_port3010CritiquePort natif d'AFFiNE ; une incohérence fait échouer toutes les sondes de santé.
max_instance_count1CritiquePlus d'une instance fragmente l'état de collaboration propre à chaque processus et les blobs du système de fichiers — divergence silencieuse des données.
container_image_sourcecustomÉlevéL'image amont ne contient pas le point d'entrée qui assemble DATABASE_URL / REDIS_SERVER_* — le serveur ne peut pas atteindre sa base de données.
enable_cloudsql_volumefalseÉlevéLes deux-points du chemin du socket cassent l'analyseur d'URL d'AFFiNE (invalid port) ; conservez IP privée + sslmode=require.
cpu_always_allocatedtrueÉlevéLa limitation basée sur les requêtes prive de CPU la synchronisation Yjs par WebSocket entre les requêtes — l'édition en direct se bloque.
min_instance_count1ÉlevéLa mise à l'échelle jusqu'à zéro interrompt les sessions de collaboration actives et ajoute des délais de démarrage à froid.
memory_limit4Gi (≥ 2Gi)ÉlevéOOM de Node.js pendant la synchronisation des documents ou la migration en dessous de 2Gi.
environment_variables PORTne jamais définirÉlevéPORT est réservé par Cloud Run ; le définir fait échouer chaque création de Job avec une erreur HTTP 400.
application_versionstable (tag épinglé)MoyenDes tags inexistants (p. ex. latest littéral) font échouer le build de l'image ; le module fait correspondre latest → stable.
execution_environmentgen2ÉlevéLes montages NFS nécessitent gen2.
AFFINE_SERVER_EXTERNAL_URLURL du service / domaine personnaliséMoyenUn hôte erroné casse les liens d'invitation et les URL de partage.

Pour le comportement du socle évoqué tout au long de ce guide — identité du service, mise à l'échelle et concurrence, ingress et équilibrage de charge, CI/CD, Cloud Armor, IAP, Binary Authorization, VPC-SC, sauvegardes et mise en miroir des images — consultez App_CloudRun. La configuration applicative propre à AFFiNE, partagée avec la variante GKE, est décrite dans Affine_Common.

Need RAD to do something it does not do yet? Request it on the roadmap, or vote on what is already there.