Googlebot抓取大小檢測器

Googlebot抓取大小檢測器 測量任何網頁或 PDF 的未壓縮大小，以驗證其是否符合 Googlebot 的官方抓取限制。當頁面超過這些限制時，Googlebot 會截斷其處理的內容，可能導致重要資訊、結構化資料和連結在索引過程中被忽略。

了解 Googlebot 的抓取大小限制

Google 官方記錄了不同檔案類型的特定大小閾值。當 Googlebot 達到這些限制時，它會停止下載並僅處理已檢索到的內容：

• HTML 和支援的檔案：Googlebot 抓取未壓縮內容的前 2 MB。這包括 HTML 文件本身以及任何內聯 CSS 和 JavaScript。外部資源（樣式表、腳本、圖像）單獨獲取，每個都有自己的限制。
• PDF 檔案：Googlebot 抓取 PDF 文件的前 64 MB。雖然這是一個寬鬆的限制，但仍應檢查非常大的 PDF 報告或型錄。

這些限制適用於 未壓縮 的內容大小，而非您在網路工具中看到的壓縮傳輸大小。即使您的伺服器發送 gzip 壓縮響應，Googlebot 也會測量完整的解壓縮大小。

為什麼頁面大小對 SEO 很重要

索引截斷

如果您的頁面超過大小限制，超出閾值的所有內容對 Google 而言都是不可見的。這可能導致：

• 重要正文內容未被索引
• 頁面底部的結構化資料（JSON-LD 構架）被遺漏
• 頁腳或底部導覽中的內部連結未被發現
• 複合式搜尋結果和搜尋功能未出現在搜尋結果中

導致頁面過大的常見原因

• 過多的內聯 CSS/JavaScript：直接嵌入在 HTML 中的大型框架或元件庫
• 伺服器端渲染 (SSR) 內容：將大型數據負載序列化到 HTML 中的 SPA
• 長產品列表頁面：包含數百個產品的電子商務類別頁面
• 冗長的 HTML 註解：注入大型註解塊的構建工具
• 嵌入式數據：頁面原始碼中的 Base64 編碼圖像或大型 JSON 數據

此工具的工作原理

1. 使用 Googlebot UA 獲取：工具使用 Googlebot 的官方使用者代理字串請求您的 URL，並請求未壓縮內容（Accept-Encoding: identity）以測量真實的未壓縮大小。
2. 檢測內容類型：它會自動檢測響應是 HTML 還是 PDF，並應用相應的限制（2 MB 或 64 MB）。
3. 測量與分析：測量未壓縮內容大小並與限制進行比較。對於 HTML，提供了內聯 CSS、JavaScript 和註解的組成分析。
4. 重定向追蹤：檢測並顯示任何 HTTP 重定向（301, 302 等），顯示從原始 URL 到最終 URL 的完整重定向鏈。

如何減少頁面大小

將內聯代碼移至外部檔案

最有效的優化是將大型內聯 <style> 和 <script> 塊移至外部 CSS 和 JavaScript 檔案。每個外部檔案都有自己的 2 MB 限制並由瀏覽器快取。

刪除不必要的內容

• 從生產構建中去除 HTML 註解
• 刪除隱藏或重複的內容塊
• 壓縮內聯 CSS 和 JavaScript
• 刪除未使用的數據屬性和空元素

優化頁面結構

• 對長內容頁面使用分頁，而不是無限滾動
• 延遲載入首屏以下的內容區塊
• 減少 DOM 深度和元素數量
• 將大型數據負載移至 API 端點

如何根據 Googlebot 限制檢查您的頁面大小

1. 輸入您的 URL：在輸入欄位中輸入或貼上您要檢查的頁面完整 URL。該工具接受 HTTP 和 HTTPS URL。
2. 點擊檢查大小：點擊「檢查抓取大小」按鈕。該工具將使用 Googlebot 的使用者代理字串獲取頁面，並測量未壓縮的內容大小。
3. 查看結果：查看顯示頁面大小相對於限制的視覺化儀表、內容組成分析以及必要的具體優化建議。

常見問題

Googlebot 的抓取大小限制是多少？

Googlebot 會抓取 HTML 和支援的檔案類型（如 CSS 和 JavaScript）的前 2 MB。對於 PDF 檔案，Googlebot 會抓取前 64 MB。超出這些限制的任何內容都可能無法被 Google 處理或索引。這些限制適用於未壓縮的檔案大小，而非壓縮後的傳輸大小。

如果我的頁面超過了 Googlebot 的大小限制會發生什麼？

如果您的頁面超過抓取大小限制，Googlebot 將僅處理限制內的內容並忽略其餘部分。這意味著頁面底部的關鍵內容、結構化資料或連結可能不會被索引。這可能導致索引不完整、缺少搜尋功能（如複合式搜尋結果）以及 SEO 表現不佳。

2 MB 的限制是針對壓縮還是未壓縮的內容？

2 MB 限制適用於未壓縮的內容。即使您的伺服器發送壓縮（gzip 或 brotli）響應，Googlebot 也會在解壓縮後測量未壓縮的大小。此工具會請求未壓縮的內容，以便為您提供 Googlebot 實際處理內容的準確測量。

我該如何減少頁面大小以符合 Googlebot 的限制？

要減少頁面大小：(1) 將內聯 CSS 移至外部樣式表，(2) 將內聯 JavaScript 移至外部檔案，(3) 刪除不必要的 HTML 註解，(4) 最小化 DOM 深度和複雜度，(5) 選擇性使用伺服器端渲染，(6) 延遲載入非關鍵內容，(7) 刪除隱藏或重複的內容，(8) 對內容非常長的頁面使用分頁。

Googlebot 會分開抓取外部 CSS 和 JavaScript 檔案嗎？

是的，Googlebot 會單獨獲取每個外部 CSS、JavaScript 和圖像資源。每個外部資源都有其自己的 2 MB 限制。只有 HTML 文件內的內聯樣式和腳本才會計入主頁面的 2 MB 限制。這就是為什麼將大型內聯代碼移至外部檔案是有效的優化策略。

其他資源

• Google 搜尋中心 - Googlebot 概覽
• Google - 縮減網頁大小
• Googlebot - 維基百科