產品 SEO 與 GEO 代理 付費廣告代理 網站代理 轉換代理
運作方式 方案 常見問題 部落格 預約通話

檢索效率:真的能提升自然流量嗎?

更新於 · 閱讀約 5 分鐘

簡短回答 很少。Google 表示檢索不是排名信號,它的檢索預算指南針對的是約 10,000 個以上且每天更新的網頁,或 100 萬個以上網頁的網站。如果您的新網頁發布後很快就被檢索,限制您流量的就不是檢索效率。先修好伺服器錯誤和重複網址,再把時間花在做更好的網頁上。

想把這些用在您的生意上?預約一次 30 分鐘的免費通話,一起聊聊。

預約通話

檢索效率能提升自然流量嗎?

單靠它不能。檢索就是 Google 的爬蟲(Googlebot)讀取您網頁的過程。網頁必須先被檢索才能出現在 Google 上,但檢索得更頻繁並不會讓它排得更前面。Google 的檢索團隊說得很直接:

"An increased crawl rate will not necessarily lead to better positions in Search results." (Google Search Central Blog: What crawl budget means for Googlebot) 譯文:「檢索頻率提高,並不一定會讓您在搜尋結果中排名更好。」

同一篇文章還說,檢索「is not a ranking signal」(不是排名信號)。被檢索只是入場券。決定排名的,仍然是您的網頁是否比別人更好地回答了搜尋的問題。

檢索效率是指 Google 把造訪次數花在您重要的網頁上,而不是浪費在重複網頁、錯誤網頁和死路上。檢索預算是指 Google 能夠而且願意檢索您多少個網址。Google 根據兩點來決定:您的伺服器能順暢承受多少負載(檢索容量),以及 Google 有多想要您的網頁(檢索需求),後者取決於網頁的熱門程度和更新頻率。

檢索效率什麼時候重要?

網站很大或更新很快的時候。Google 的檢索預算指南一開頭就給了一個判斷標準:

"If your site doesn't have a large number of pages that change rapidly, or if your pages seem to be crawled the same day that they are published, you don't need to read this guide." (Google Crawling Infrastructure: Optimize your crawl budget) 譯文:「如果您的網站沒有大量快速變動的網頁,或者您的網頁似乎在發布當天就被檢索,您就不需要閱讀本指南。」

指南列出了它的目標網站,並稱這些數字是「rough」(粗略)估計,不是硬性門檻:

網站檢索預算重要嗎?
100 萬個以上網頁,大約每週更新重要
10,000 個以上網頁,每天更新重要
Search Console 中大量網址顯示「Discovered - currently not indexed」(已找到 - 目前尚未建立索引)重要,需要查一查
少於幾千個網頁,例如大多數服務業的網站很少;通常能被有效率地檢索(2017 年文章)

對其他所有網站,Google 說保持 Sitemap 更新、查看「網頁索引」報表就「is adequate」(足夠了)。最後一列來自它 2017 年的文章:「fewer than a few thousand URLs」(少於幾千個網址)的網站通常能被有效率地檢索。

怎麼檢查 Google 檢索我的網站是否順利?

在 Google Search Console 裡做三項免費檢查,十分鐘就夠:

  1. 網址審查。 貼上一個您上週發布的網頁。如果顯示網頁已在 Google 上,並有最近的檢索日期,代表檢索沒問題。
  2. 網頁索引報表。 查看網頁未建立索引的原因。有幾個是正常的。如果大量網頁在「Discovered - currently not indexed」之下,就是 Google 指南提到的那個信號。請參閱已檢索或已找到,目前尚未建立索引。
  3. 檢索統計資料報表。 它顯示檢索要求總數、平均回應時間和主機狀態,也就是過去 90 天裡 Google 連到您的伺服器時是否遇到問題(Google Search Central Blog, 2020)。主機狀態有問題,不管網站多大都值得修。

剛開始用 Search Console?先看小型企業如何使用 Google Search Console。

什麼在浪費 Google 的檢索,哪些值得修?

在小型網站上,修下面這些問題是因為它們也影響訪客,而不是為了省預算。Google 的檢索預算指南把它們列為好的做法:

問題為什麼重要修正
伺服器錯誤(5xx)或「要求過多」(429)Google 會降低檢索上限,檢索得更少聯絡您的主機商;經常逾時的話就升級方案
重複網址:排序檢視、篩選頁和標籤頁Google 會嘗試檢索它知道的每個網址合併它們,或在 robots.txt 中封鎖沒用的
軟性 404(網頁是空的,寫著「找不到」,卻回傳 OK)Google 會一直檢索它們回傳真正的 404 或 410,或把內容補回去
很長的重新導向鏈Google 說這會影響檢索;它的檢索器最多跟隨 10 次跳轉讓舊網址直接指向最終網頁
網頁載入慢網頁越快,Google 能讀的越多請參閱 Core Web Vitals

一個陷阱:不要為了「節省」檢索而加上 noindex 標記。Google 說它仍會要求這些網頁,然後再捨棄,「wasting crawling time」(浪費檢索時間)。在 robots.txt 中封鎖網頁,也不會把它們的份額讓給其他網頁,除非 Google 已經達到您伺服器的上限。

有沒有目標數字,例如回應時間或錯誤率?

Google 沒有給。網路上會看到一些數字,例如伺服器回應 300 毫秒,或伺服器錯誤少於 1%。Google 的檢索預算指南沒有這類目標。它說回應時間保持穩定或變快的網站會被檢索得更多,變慢或出現伺服器錯誤的網站則會更少。在檢索統計資料裡看趨勢,而不是追一個神奇數字。

小型網站需要 XML Sitemap 嗎?

通常有幫助,但對小型網站來說可有可無。Google 把小型網站定義為「about 500 pages or fewer」(大約 500 個網頁或更少),並說如果每個網頁都能從選單或其他網頁連結到,這樣的網站可能不需要 Sitemap(Google Search Central: Learn about sitemaps)。WordPress、Wix 等架站工具通常會自動產生。在 Search Console 中提交一次,之後就不用管了。

範例

以下為示意案例,數字為虛構。

一家有 30 個網頁的水電工(美元)

新的服務網頁兩天內就會在網址審查中出現。一位 SEO 人員報價 $900 做「檢索預算稽核」。不用做。檢索不是瓶頸;這筆錢花在更好的服務網頁或邀請客戶留評論上更有用。

多倫多附近一家園藝公司改版之後

舊網址先重新導向到一個暫時網頁,再到新網頁。檢索統計資料顯示大量重新導向回應。讓每個舊網址一次跳轉直接指向它的新網頁。改版後流量下降的問題,請看下方連結的改版指南。

一家有 40,000 個網址的線上零件店

尺寸、顏色和品牌篩選產生了無窮無盡的網址組合,Search Console 把其中 25,000 個列為「Discovered - currently not indexed」。這時檢索效率就重要了:封鎖沒人搜尋的篩選組合,每個商品只保留一個乾淨的網址。

常見問題

我能讓 Google 更頻繁地檢索我的網站嗎?

不能直接要求。Google 給了兩種爭取更多檢索的方法:如果伺服器是瓶頸,就提升伺服器容量;以及做出更受歡迎、更有用、更獨特的內容。

robots.txt 裡的 crawl-delay 對 Google 有效嗎?

無效。Google 2017 年關於檢索預算的文章說,Googlebot 不處理 crawl-delay 規則。

圖片、CSS 和 JavaScript 檔案會占用檢索預算嗎?

會。Google 說它檢索的任何網址都算,包括嵌入的檔案。在小型網站上,這很少會累積成問題。

在 robots.txt 中封鎖的網頁會占用檢索預算嗎?

不會。Google 2017 年的文章說,被禁止的網址不影響檢索預算。

您的情況不同?

繼續閱讀

下一篇robots.txt 加 noindex:讓網頁一直留在 Google 裡的錯誤為什麼在 robots.txt 裡封鎖網頁,會讓 Google 看不到它的 noindex 標記、網頁繼續留在搜尋中,以及將它移除的正確步驟順序。

自己動手

可檢索性檢查清單:讓 Google 能造訪到每個頁面小型企業網站的可檢索性檢查清單:用免費工具找出孤立頁面、robots.txt 封鎖、失效連結、重新導向鏈和伺服器錯誤。

問我們一個問題

一句話就夠了。我們會以電子郵件回覆。

出處

  1. Google Crawling Infrastructure: Optimize your crawl budget
  2. Google Search Central Blog: What crawl budget means for Googlebot (2017)
  3. Google Search Central Blog: New and improved crawl stats for your site (2020)
  4. Google Search Central: Learn about sitemaps
  5. Google Crawling Infrastructure: HTTP status codes and network errors