資訊中心:網站架構與資料庫故障排查:從現象到根因
現象一:整站突然變慢
可能層: 資料庫壓力、磁碟 IO、外部依賴超時。
定位路徑:
- 看 CPU 與磁碟 IO 是否同時上升。
- 看慢查詢日誌是否在同一時段激增。
- 看是否有外部介面超時未被捕獲。
- 看是否有人跑了批次工作或全量匯出。
根因判斷: 資料庫 CPU 高 + 慢查詢集中 → 查詢問題;磁碟 IO 高但查詢正常 → 備份或日誌寫入。
現象二:偶發超時,重試就好
可能層: 連接池耗盡、鎖等待、快取擊穿。
定位路徑:
- 看連接數曲線是否呈鋸齒狀。
- 看是否有長事務佔鎖。
- 看快取失效瞬間是否出現請求突發。
根因判斷: 鋸齒狀連接 + 無明顯慢 SQL → 連接池太小或請求堆積;快取失效瞬間突增 → 快取擊穿。
現象三:後台改了,前台沒變
可能層: 頁面快取、CDN 快取、對象快取、主從延遲。
定位路徑:
- 直接訪問源站,繞過 CDN。
- 檢查頁面快取是否命中(看響應頭)。
- 檢查後台更新是否清了對應快取鍵。
- 檢查是否讀的是從庫。
根因判斷: 源站正確但公網舊 → CDN;源站也舊 → 頁面快取或對象快取;剛更新就讀 → 主從延遲。
現象四:高峯期大量報錯
可能層: 連接耗盡、佇列積壓、檔案句柄、記憶體。
定位路徑:
- 看錯誤類型:連接失敗、超時、記憶體溢出。
- 看行程數與佇列長度。
- 看是否有慢請求長時間佔用行程。
根因判斷: 錯誤集中在連接失敗 → 連接池或資料庫上限;集中在超時 → 慢請求堆積。
排查時的三條原則
- 先止血後查因:先恢復服務,再找根因。
- 一次只改一處:同時改快取與查詢,無法歸因。
- 留證據:日誌、監控曲線、執行計畫都截圖存檔。
常見誤判
- 把“資料庫慢”當成“伺服器不行”,直接升配,問題依舊。
- 把“快取沒命中”當成“快取壞了”,其實鍵設計有問題。
- 把“主從延遲”當成“程式碼 bug”,改程式碼無效。
邊界
排查路徑覆蓋常見現象,不覆蓋程式碼級缺陷(如死循環、記憶體泄漏)。後者需要結合日誌與程式碼審查。
相關閱讀: