AWS, Cloudflare, Vercel, Supabase et CMS headless : que reste-t-il ?
Bonjour, je suis Ōtsuka, CTO chez Liberogic.
Dans notre précédent article, nous avons présenté les différences entre les journaux d'accès, les journaux d'application et les journaux d'audit.
Cette fois, nous examinons plus concrètement les journaux que peuvent produire AWS, Cloudflare, Vercel, Supabase et les CMS headless que nous utilisons au quotidien.
Il ne s'agit toutefois pas de comparer en détail les tarifs ou les fonctionnalités de chaque service.
Chaque service présente des caractéristiques très différentes en matière de « ce qui est conservé par défaut » et de « ce qui reste consultable a posteriori », et nous les résumons ici.
Services | Principaux journaux consultables | Principes de conservation à long terme | Points d'attention |
|---|---|---|---|
AWS | Exécution, accès et opérations d'administration | Combinaison avec CloudWatch ou S3 | Configuration requise pour chaque service |
Cloudflare | Exécution des Workers, exceptions, etc. | Transfert vers R2 ou des services externes | La diffusion de contenu statique est distincte des journaux d'exécution |
Vercel | Functions, déploiements et journaux d'exécution | Transfert vers des services externes via Log Drains, etc. | La durée de conservation dépend du forfait |
Supabase | Base de données, API, authentification, opérations d'administration | Transfert vers des services externes via Log Drains, etc. | Les opérations propres à l'application sont implémentées séparément |
Headless CMS | Mises à jour de contenu, opérations d'administration | Utilisation de l'historique et des fonctions d'audit du service | Les opérations ciblées et les offres diffèrent |
Datadog/Sentry | Journaux et informations d'erreur agrégés | Conçu selon l'usage et le volume de stockage | La seule mise en place ne constitue pas un journal d'audit |
Bien que l'on parle de « fonction de journalisation » dans les deux cas, les opérations concernées et les durées de conservation diffèrent.
Par ailleurs, le fait qu'un élément soit affiché dans l'interface d'administration et qu'il soit conservé longtemps à des fins d'audit sont deux choses distinctes.
AWS propose déjà tous les services nécessaires, mais une configuration reste requise.
AWS dispose d'une offre de services de journalisation particulièrement complète.
Par exemple, l'état d'exécution de Lambda et d'API Gateway est collecté dans CloudWatch Logs. Les opérations effectuées dans la console de gestion AWS ou via l'API peuvent être enregistrées avec CloudTrail.
En résumé,
- CloudWatch Logs : suivre le fonctionnement des applications et des services AWS
- CloudTrail : identifier qui a fait quoi dans l'environnement AWS
- S3 : conserver les journaux sur le long terme
Chacun de ces services a un rôle distinct.
La recherche, la supervision, les notifications et la conservation à long terme peuvent être mises en place entièrement au sein d'AWS, ce qui facilite la conception d'un système soumis à des exigences d'audit strictes.
Toutefois, utiliser AWS ne signifie pas que tout est enregistré automatiquement.
Il est nécessaire de configurer la sortie des journaux pour chaque service utilisé, ainsi que de définir la durée et l'emplacement de conservation. La grande flexibilité offerte suppose une conception rigoureuse.
Cloudflare : séparer l'investigation à court terme et l'archivage externe
Avec Cloudflare Workers, vous pouvez consulter dans Workers Logs les sorties de console.log() ainsi que les erreurs.
Ces outils sont très pratiques pour le développement et l'analyse des incidents récents, mais si vous devez conserver une piste d'audit sur une longue période, il est préférable de ne pas vous limiter à l'interface de journalisation standard.
Pour les journaux devant être conservés longtemps, nous envisageons une architecture qui les transfère vers R2 ou vers un service externe de gestion des logs, à l'aide de Logpush par exemple.
Par ailleurs, si vous diffusez un site web statique avec Cloudflare Pages ou Workers, tous les accès ne sont pas forcément enregistrés dans les journaux d'exécution du Worker.
Le site s'affiche normalement, on pourrait donc penser que les journaux d'accès existent forcément, mais la diffusion des fichiers statiques et l'exécution d'un Worker sont deux mécanismes distincts.
Cloudflare permet de construire des architectures relativement compactes, mais il faut comprendre quel traitement passe par où pour concevoir la journalisation en conséquence.
Vercel facilite la consultation des journaux de Next.js
Avec Vercel, vous pouvez consulter depuis le tableau de bord les journaux produits par les Functions de Next.js, les Server Actions et autres composants.
Le déploiement et les journaux d'exécution étant regroupés au même endroit, l'environnement est clair pour les développeurs et facilite l'investigation courante des erreurs.
Cependant, la durée de conservation des journaux et la portée des transferts vers des services externes varient selon le forfait.
Si vous souhaitez les conserver sur une longue période, vous aurez besoin d'un autre dispositif, par exemple en les envoyant vers un espace de stockage externe via Drains.
Que ce soit sur Vercel ou ailleurs, le fait que les journaux soient visibles dans l'interface d'administration et le fait qu'ils soient conservés à long terme à des fins d'audit sont deux choses différentes.
Il est important de vérifier ces deux points séparément.
Supabase propose de nombreux journaux en dehors de la base de données.
Supabase est centré sur PostgreSQL, mais il se compose en réalité de plusieurs fonctionnalités, notamment l'authentification, l'API, le stockage et les Edge Functions, et pas seulement de la base de données.
Chacun de ces journaux est consultable depuis l'interface d'administration, ce qui permet de suivre plus facilement le fonctionnement global de l'application.
Il existe également des journaux d'authentification, ainsi que des journaux d'audit qui retracent les opérations effectuées dans l'interface d'administration de Supabase.
Attention toutefois : les opérations d'administration dans Supabase et les opérations effectuées dans l'application que vous avez développée sont deux choses distinctes.
Par exemple, Supabase peut enregistrer qui a modifié les paramètres d'un projet, mais si vous voulez savoir qui a modifié les informations clients dans votre propre interface d'administration, vous devez les journaliser côté application.
Consulter aussi l'historique des opérations du CMS headless
Les CMS headless comme microCMS, Kuroco et NILTO proposent un historique des modifications de contenu ainsi que des journaux des opérations effectuées dans le back-office.
Les informations indiquant qui a modifié un article, quand il a été publié, ou qui a changé des paramètres ou des droits d'accès sont essentielles en tant que journaux d'audit pour l'exploitation d'un site web.
Cependant, les opérations enregistrées, la durée de conservation consultable et les formules disponibles varient selon le service.
Même si l'historique des modifications de contenu est consultable, toutes les opérations d'administration ne sont pas forcément conservées dans les journaux d'audit.
Par ailleurs, un CMS ne conserve en principe que les traces de ses propres opérations internes. Les accès au site web publié et les erreurs survenant côté frontend doivent être vérifiés dans l'environnement d'hébergement.
Dans un projet de CMS headless, il est plus clair de considérer le CMS, le frontend, l'hébergement et l'API comme un seul système.
Si vous ajoutez Datadog ou Sentry
Lorsque les journaux sont dispersés entre plusieurs services, chaque incident oblige à ouvrir les différents back-offices pour mener l'enquête.
En centralisant les journaux dans un service de gestion de logs comme Datadog, il devient possible de rechercher dans les journaux de plusieurs environnements à la fois et de détecter les anomalies avec des notifications.
Sentry est également largement utilisé, mais ce service excelle dans l'identification de l'origine des erreurs et de leur périmètre d'impact.
Ces deux solutions sont pratiques, mais leur mise en place ne suffit pas à constituer automatiquement un journal d'audit complet.
Il faut définir soi-même ce qui doit être journalisé dans l'application, et conserver l'ensemble des journaux sur une longue période fait progressivement augmenter les coûts en fonction du volume de données.
Mode de stockage | Cas d'usage adaptés | Caractéristiques |
|---|---|---|
Tableau de bord et services de gestion des journaux | Investigation courante des incidents | Recherche rapide, mais les coûts augmentent avec le volume stocké |
Stockage de type R2, S3, etc. | Audit et conservation à long terme des journaux | Peu coûteux à conserver, mais leur récupération demande un travail supplémentaire lors d'une investigation |
En pratique, il est judicieux de séparer les journaux consultés au quotidien de ceux conservés au cas où un incident surviendrait.
Impossible de déterminer quel service est le meilleur ?
Il est impossible de conclure qu'AWS est le meilleur ou que Cloudflare l'est en se basant uniquement sur les journaux.
L'essentiel est de déterminer ce que le projet doit enregistrer.
- Enquêter sur les erreurs d'un service
- Conserver une trace des opérations des administrateurs
- Consulter l'historique des mises à jour du CMS
- Suivre les authentifications et les modifications de droits
- Je souhaite conserver ces données sur une longue durée à des fins d'audit
Une fois vos besoins précisés, on distingue plus clairement ce que les fonctionnalités standard de chaque service peuvent couvrir, et ce qui nécessite des mécanismes supplémentaires.
Nous ne mettons pas en place une grande infrastructure de journalisation dès le départ. Nous concevons plutôt l'architecture en fonction des exigences et du budget de chaque projet.
Dans le prochain article, nous présenterons de manière plus concrète les journaux à produire côté application lorsque ces services sont combinés, ainsi que les endroits où les conserver.
Bref, voilà.
Pilier du département technique de Liberogic. Lorsqu'il entend une remarque du type « Ce serait pratique d'avoir ça… », il ajoute de la valeur grâce à son ingéniosité et met en œuvre la solution en un rien de temps. Très apprécié des clients pour sa grande capacité de communication, il est aussi un trésor de notre entreprise, et un grand amoureux des chats.
Sho Otsuka
Directeur technique (CTO) / Ingénieur en chef / Représentant de Nekoana LLC / Paraît étonnamment jeune