Topics

審計日誌(二):跨 Web 服務比較日誌功能

  • column

AWS、Cloudflare、Vercel、Supabase、Headless CMS 之後還剩下什麼?

大家好,我是 Liberogic 的 CTO 大塚。

上一篇我們整理了存取日誌、應用程式日誌與審計日誌之間的差異。

這次我們要更具體地看看,我們日常使用的 AWS、Cloudflare、Vercel、Supabase 與 Headless CMS 能留下哪些日誌。

不過,這並不是逐一比較各服務的價格或功能。

各服務在「預設會保留什麼」以及「事後能確認到什麼程度」上差異相當大,因此我們在這裡簡要整理這些重點。

服務

主要可確認的日誌

長期保存的考量

注意事項

AWS

執行、存取、管理操作

結合 CloudWatch 與 S3

需要依各服務分別設定

Cloudflare

Workers 的執行、例外等

轉送至 R2 或外部服務

靜態配送與執行日誌分開管理

Vercel

Functions、部署、執行日誌

透過 Log Drains 等方式轉送至外部

保存範圍依方案而定

Supabase

資料庫、API、驗證、管理操作

透過 Log Drains 等方式轉送至外部

應用程式專屬的操作需另行實作

Headless CMS

內容更新、管理操作

利用服務的歷程紀錄與稽核功能

目標操作與方案各有不同

Datadog/Sentry

彙整後的日誌與錯誤資訊

依用途與保存容量進行設計

單純導入並不等同於稽核日誌

同樣是「日誌功能」,但目標操作與保存期間各有不同。

此外,在管理畫面上顯示,與為稽核目的而長期保存,也是不同的問題。

AWS 的各類服務大致齊全,但仍需要設定。

AWS 在日誌相關服務方面相當完整。

例如,Lambda 與 API Gateway 等服務的執行狀況會彙整到 CloudWatch Logs。AWS 管理主控台與 API 中執行的操作,則可透過 CloudTrail 記錄。

簡單來說,

  • CloudWatch Logs:檢視應用程式與 AWS 服務的運作狀態
  • CloudTrail:查看誰在 AWS 環境中執行了什麼操作
  • S3:長期保存日誌

的分工方式。

從搜尋、監控、通知到長期保存,都可以在 AWS 內完成組建,因此這樣的架構也較容易支援對稽核要求較高的系統。

不過,並不是「只要使用 AWS,所有紀錄就會自動保留」。

必須依各服務分別設定日誌輸出,並決定保存期限與保存位置。由於可自訂的範圍很大,前提是必須妥善設計。

Cloudflare 的短期調查與外部保存應分開考量

在 Cloudflare Workers 中,可透過 Workers Logs 確認 console.log() 所輸出的內容及錯誤訊息。

開發過程中的確認與近期的故障調查相當方便,但若需要保留長期的稽核紀錄,最好不要只依賴標準的日誌畫面。

需要長期保存的日誌,可考慮透過 Logpush 等工具傳送至 R2 或外部的日誌管理服務。

此外,若您使用 Cloudflare Pages 或 Workers 提供靜態網站,並非所有存取紀錄都會保留在 Worker 的執行日誌中。

網站可以正常顯示,因此很容易認為「應該也有存取日誌」,但靜態檔案的傳送與 Worker 的執行是不同的機制。

Cloudflare 較容易建立精簡的架構,但同時也需要清楚掌握各項處理的經過路徑,才能妥善設計日誌。

Vercel 便於檢視 Next.js 日誌

在 Vercel 的管理介面中,可以查看 Next.js 的 Functions 與 Server Actions 等所輸出的日誌。

部署與執行日誌位置相近,對開發者來說一目瞭然,也便於日常的錯誤調查。

另一方面,可查看日誌的期間,以及可轉送至外部的範圍,會依方案而有所不同。

若希望長期保存,則需要搭配其他機制,例如使用 Drains 轉送至外部的儲存位置。

不限於 Vercel,在管理介面中顯示日誌,以及為稽核目的而長期保存日誌,是兩回事。

這兩者需要分開確認。

Supabase 的日誌也涵蓋許多資料庫以外的範圍

Supabase 是以 PostgreSQL 為核心的服務,但實際上不只有資料庫,還由驗證、API、儲存空間、Edge Functions 等多項功能組成。

由於可在管理介面中查看各項日誌,因此能輕鬆掌握整個應用程式的運作狀況,這是其特色。

此外,也有與驗證相關的日誌,以及用於確認在 Supabase 管理介面中所執行操作的稽核日誌。

不過,這裡同樣需要注意,Supabase 的管理操作與我們自行開發的應用程式內操作是不同的。

例如,「誰變更了 Supabase 的專案設定」可由服務端記錄,但「誰在自家管理介面中變更了客戶資料」則需要由應用程式端記錄。

也請確認 Headless CMS 的操作紀錄

microCMS、Kuroco、NILTO 等 Headless CMS 皆提供內容更新紀錄與管理後台的操作日誌。

誰更新了文章、何時發布、何時變更設定或權限等紀錄,對於網站營運而言是重要的稽核日誌。

不過,可記錄的操作、可查詢的期間以及可使用的方案,會依服務而有所不同。

即使能查詢內容的更新紀錄,也不代表所有管理操作都會留下稽核日誌。

此外,CMS 原則上只保存 CMS 內部的操作紀錄。已發布網站的存取情況,以及前端發生的錯誤,則需要在主機代管環境中確認。

在 Headless CMS 專案中,若將 CMS、前端、主機代管與 API 視為一個整體系統來掌握,會更容易理解。

若要新增 Datadog 或 Sentry 時

當日誌分散在多個服務中,每次發生障礙都得逐一開啟各管理後台進行調查。

將日誌集中到 Datadog 等日誌管理服務後,就能跨多個環境一併搜尋日誌,並在偵測到異常時發出通知。

Sentry 也經常被使用,不過它擅長的是追查錯誤發生的位置與影響範圍。

兩者都很方便,但導入之後,並不會自動完成稽核日誌。

輸出哪些內容需要由應用程式端決定,而且若長期保存所有日誌,費用也會隨資料量增加。

儲存方式

適合的用途

特點

管理介面・日誌管理服務

日常的故障調查

可以立即搜尋,但費用會隨保存量增加

R2、S3 等儲存空間

稽核、證據紀錄的長期保存

成本低廉,但調查時需要額外取出資料

較務實的做法,是將平時經常搜尋的日誌,與為了應對突發狀況而保存的日誌分開管理。

無法單憑「哪項服務最好?」來決定

若只比較日誌,無法直接判定 AWS 最好、Cloudflare 最好。

重點在於,該專案需要記錄哪些內容。

  • 想調查服務的錯誤
  • 想保留管理員的操作紀錄
  • 想確認 CMS 的更新歷程
  • 想追蹤驗證與權限變更
  • 希望長期保存以便稽核

掌握需求後,就能看出哪些部分可以由各服務的標準功能處理,哪些部分則需要額外的機制。

我們的做法也不是一開始就建置龐大的日誌基礎架構,而是依據專案的需求與預算來規劃架構。

下一篇將說明,若組合這些服務,應用程式端會輸出哪些日誌、又該保存到哪裡。會更貼近實務操作。

那麼就先這樣。

關於撰寫本文的人

Liberogic 技術部門的支柱。聽到「要是有這種東西就好了」、「有這個就方便了」這類話,就會憑著過人的智慧加上附加價值,轉眼間就完成實作。溝通能力高、深受客戶喜愛,是公司的寶貝,也是個超愛貓的人。

大塚 翔

董事 CTO / 首席工程師 / 合同會社貓穴 代表 / 年輕得很沒道理

查看此員工的文章

我們的優勢在於穩健的團隊體制與快速的應對能力

Liberogic 由經驗豐富的資深人員積極推動專案,因此獲得客戶的高度評價。
我們會妥善指派專案經理與總監,致力於順利推進整體專案。 我們採取依據專案需求適才適所分配資源的方式,避免因全程投入而增加不必要的成本,並且在掌握業務內容、製作與提交估價方面的速度也廣受好評。

注: 本公司不積極承接類似 SES 的駐點業務等,敬請事先諒解。

可搭配 Slack、Teams、Redmine、Backlog、Asana、Jira、Notion、Google Workspace、Zoom、Webex 等幾乎所有主要的專案管理工具與聊天工具使用。

歡迎諮詢您的 Web 相關問題。

案例分析