資訊中心:網站收錄最佳化:sitemap、robots 和抓取
第一步:查 robots.txt
- 是否誤封欄目目錄。
- 是否封了 CSS/JS。
- 是否封了搜尋結果頁。
- 站點地圖地址是否正確。
常見錯誤: 爲了“防重複”封掉整個目錄,結果內容頁也進不去。
第二步:查站點地圖
- 只包含可索引的 200 頁面。
- 核心頁面都在。
- 不包含 404、noindex、重定向頁。
- lastmod 反映真實更新時間。
- 已在搜尋平台送出。
常見錯誤: 站點地圖自動包含所有 URL,包括篩選頁和空頁。
第三步:查狀態碼和重定向
- 重要頁面返回 200。
- 舊 URL 301 到新 URL,且只跳一次。
- 沒有 302 臨時跳轉長期使用。
- 沒有重定向循環。
第四步:查 canonical 和重複頁
- 每個頁面 canonical 指向自身或主版本。
- 參數頁、列印頁、分頁處理合理。
- 多語言有 hreflang。
- 沒有所有頁都指向首頁。
第五步:查內鏈和結構
- 首頁到欄目。
- 欄目到內容頁。
- 相關閱讀指向真實頁面。
- 沒有大量孤立頁。
- 核心頁 3 次點擊內可達。
第六步:查內容品質
- 頁面有獨立價值。
- 不是批次複製或空殼。
- 標題和內容匹配查詢。
- 沒有隱藏內容或cloaking。
常見不收錄原因
| 原因 | 檢查 | 修復 |
|---|---|---|
| robots 誤封 | robots.txt | 放行目錄 |
| noindex 誤用 | meta/header | 去掉 |
| canonical 錯指 | HTML | 改主版本 |
| 站點地圖含無效頁 | sitemap | 清理 |
| 內鏈不可達 | 導覽/相關閱讀 | 補內鏈 |
| 內容太薄 | 頁面 | 補價值 |
驗收指標
- 索引頁面數增長。
- 抓取錯誤下降。
- 404 和重定向鏈減少。
- 目標頁面出現在搜尋結果。
- 站點地圖送出無錯誤。
邊界
收錄最佳化能提高被發現和索引的概率,但不能保證排名。排名還取決於內容品質、競爭和外部信號;任何“保證收錄/保證排名”的承諾都不可靠。
相關閱讀: