Topics

审计日志(第2篇):横向比较各 Web 服务的日志功能

  • column

AWS、Cloudflare、Vercel、Supabase 和无头 CMS 之后还剩下什么?

您好,我是Liberogic的CTO大冢。

上一篇我们梳理了访问日志、应用日志和审计日志之间的区别。

这次我们更具体一些,看看我们日常使用的 AWS、Cloudflare、Vercel、Supabase 和无头 CMS 分别能留下哪些日志。

不过,这并不是逐项比较各服务价格或功能的内容。

各服务在“默认保留什么”以及“之后能查到哪些内容”方面差异很大,因此我们将简要梳理这些要点。

服务

主要可查看的日志

长期保存的思路

注意事项

AWS

执行、访问、管理操作

结合 CloudWatch 和 S3 使用

需要按服务分别进行配置

Cloudflare

Workers 的执行、异常等

转发至 R2 或外部服务

静态分发与执行日志分开管理

Vercel

Functions、部署、执行日志

通过 Log Drains 等方式转发至外部

保存范围取决于套餐

Supabase

数据库、API、认证、管理操作

通过 Log Drains 等方式转发至外部

应用自定义操作需另行实现

Headless CMS

内容更新、管理操作

使用服务的历史记录与审计功能

目标操作和套餐有所不同

Datadog/Sentry

汇总的日志、错误信息

根据用途和存储量进行设计

仅启用功能并不等同于审计日志

虽同为“日志功能”,但其所涵盖的操作和保存期限可能有所不同。

此外,在管理界面中显示的内容与为审计目的长期保存的内容也是两回事。

AWS 的功能已基本齐全,但需要进行设置

AWS 的日志相关服务非常丰富。

例如,Lambda 和 API Gateway 等的执行状况会汇集到 CloudWatch Logs 中。在 AWS 管理控制台或通过 API 进行的操作,可以通过 CloudTrail 进行记录。

简单来说,

  • CloudWatch Logs:查看应用程序和 AWS 服务的运行情况
  • CloudTrail:查看谁在 AWS 环境中执行了什么操作
  • S3:长期保存日志

这样的职责分工。

从检索、监控、通知到长期保存,都可以在 AWS 内部搭建完成,因此很容易构建满足审计要求较高的系统。

但需要注意,并不是“只要使用 AWS,所有日志就会自动保留”。

需要为每项所用服务分别设置日志输出,并确定保存期限和保存位置。自由度较高,因此前提是必须进行周密的设计。

将短期调查与外部存储分开考虑

在 Cloudflare Workers 中,可以通过 Workers Logs 查看 console.log() 输出的内容和错误信息。

在开发过程中的确认和近期故障排查中非常方便,但如果需要保留长期的审计记录,最好不要仅依赖标准日志界面。

对于需要长期保存的日志,可以考虑使用 Logpush 等工具将其发送到 R2 或外部日志管理服务的架构。

另外,如果使用 Cloudflare Pages 或 Workers 来分发静态网站,并非所有访问都会记录在 Worker 的执行日志中。

网站能够正常显示,因此很容易认为“应该也有访问日志”,但静态文件的分发与 Worker 的执行是不同的机制。

Cloudflare 较容易构建相对紧凑的架构,但另一方面,需要理解各处理经过哪些环节,才能合理地设计日志。

Vercel 便于查看 Next.js 的日志

在 Vercel 中,可以通过管理界面查看 Next.js 的 Functions 和 Server Actions 等输出的日志。

部署和执行日志位于相近的位置,因此对开发者而言更容易理解,日常的错误排查也很方便。

另一方面,可查看日志的期限以及可转发至外部的范围因套餐而异。

如需长期保存,则需要借助 Drains 将日志发送至外部存储等其他方案。

无论是 Vercel 还是其他平台,管理后台中显示日志与为审计目的而长期保存日志,是两回事。

这两点需要分开确认。

Supabase 的日志种类也很多,不限于数据库

Supabase 以 PostgreSQL 为核心,但实际上其服务由数据库、身份验证、API、存储、Edge Functions 等多种功能构成。

各项日志均可在管理后台中查看,因此其特点是便于追踪整个应用的运行情况。

此外,还提供与身份验证相关的日志,以及用于查看在 Supabase 管理后台中所执行操作的审计日志。

需要注意的是,Supabase 的管理操作与我们自己开发的应用内操作是不同的。

例如,“谁修改了 Supabase 项目设置”可以由服务方记录,但“谁在本公司的管理后台中修改了客户信息”则需要在应用端进行记录。

同时确认无头 CMS 的操作历史记录

microCMS、Kuroco、NILTO 等无头 CMS 提供内容更新历史和管理后台的操作日志。

谁更新了文章、何时发布、何时更改了设置或权限等记录,是网站运营中的重要审计日志。

但是,记录的操作内容、可查询的保存期限以及可使用的套餐因服务而异。

即使可以查看内容更新历史,也不代表所有管理操作都会作为审计日志保留。

此外,CMS 本身基本只保存 CMS 内部的操作记录。已发布网站的访问情况以及前端发生的错误,需要在托管环境中进行确认。

在无头 CMS 项目中,将 CMS、前端、托管和 API 视为一个整体系统,会更容易理解。

如果要添加 Datadog 或 Sentry

如果日志分散在多个服务中,每次发生故障都需要逐个打开各个管理后台进行排查。

将日志集中到 Datadog 等日志管理服务后,可以统一搜索多个环境的日志,并在检测到异常时发送通知。

Sentry 也经常被使用,不过它擅长的是排查错误发生的位置和影响范围。

两者都很方便,但仅仅引入它们并不会自动生成完整的审计日志。

需要由应用程序端决定输出哪些内容,而且如果长期保存所有日志,费用会随着数据量的增加而上升。

存储方式

适用场景

特点

管理后台・日志管理服务

日常故障排查

可以快速检索,但费用会随存储量增加

R2・S3 等对象存储

审计与日志长期留存

保存成本低,但调查时需要额外步骤取出

实际做法通常是将日常检索用的日志与出现问题时需要保留备查的日志分开管理。

无法简单判断哪项服务更优

仅凭日志对比,无法断定 AWS 最好或 Cloudflare 最好。

关键在于,该项目需要记录哪些内容。

  • 想调查服务错误
  • 想留存管理员的操作记录
  • 想确认 CMS 的更新历史
  • 想追踪身份验证和权限变更
  • 希望长期保存以用于审计

明确需求后,就能看清哪些部分可以由各项服务的标准功能满足,哪些部分则需要额外的机制。

我们也不会一开始就搭建庞大的日志基础设施,而是根据项目的需求和预算来规划架构。

下一篇将介绍,在组合使用这些服务时,应用程序端会输出哪些日志、又该保存到哪里,内容会更贴近实际工作场景。

那就先到这里。

撰写本文的人

Liberogic技术部门的中坚力量。每当听到“要是有这样的东西就好了,要是能有就方便了”这样的想法,便凭借与生俱来的智慧加以延伸,转眼间就将其实现。沟通能力出众,深受客户喜爱,是本公司的宝贝,同时也是十足的爱猫人士。

大塚 翔

董事 CTO / 首席工程师 / 合同会社猫穴 代表 / 外表不必要地显年轻

查看此员工的文章

以稳健的团队体制和迅速的应对能力为傲

Liberogic 的资深团队积极推动项目,因此深受客户好评。
我们致力于合理配置项目经理与总监,确保整个项目顺利推进。 我们采用按需投入的方式,避免不必要的全员投入导致成本增加,合理分配资源、人尽其才。同时,我们在掌握业务内容、制作与提交报价方面的速度也广受好评。

※ 当社不积极开展 SES 类驻场业务,敬请谅解。

您可以使用 Slack、Teams、Redmine、Backlog、Asana、Jira、Notion、Google Workspace、Zoom、Webex 等几乎所有主流的项目管理工具和聊天工具。

Web 方面的烦恼,欢迎随时咨询。

案例分析