Google bot檢索頻率過高降低網站速度怎麼辦?

原因

正常來說,Google Bot會根據網站的體質,自動的決定檢索適當的頻率。但是如果Google Bot檢索的頻率過高,就可能會拖慢伺服器的速度,這種狀況在行銷活動檔期尤為明顯,例如雙十一、雙十二等等。在本身流量就已經滿額超載的情況下,如果在遇到Google Bot異常的超額檢索,絕對會拖慢網站的伺服器,造成錯誤(500)的出現。

解決方法

1. 到Google Search Console要求降低Google Bot索引頻率

我們可以透過官方的指南,到這裡提交暫時降低Google Bot索引要求。這項要求通常會在3-5天內生效,屆時就可以到GSC的後台去確認Google Bot索引的數量是否有明顯降低

2. 發送包含429的狀態碼

429指的是要求過多的檢索,此舉可以告訴Google Bot你來的太多次了,因而可以降低檢索頻率。但是跟第一個方法相比,還是最建議能用第一個方法就不用這個方法。

補充:絕對不要用4XX狀態碼降低索引頻率,4XX狀態碼透露出的是“用戶端錯誤”相關的問題,雖然短期內可以降低Google Bot的索引頻率,但是如果沒有拿捏好就會讓Google以為網頁不存在,進而把你的網站從搜尋結果上面移除,需要非常注意。

總結

這個問題會發生主要比較多會集中在已經比較有規模的電商網站,因為電商網站的更新頻率快、網頁數多,Google本身過來爬取的頻率就會比較高。因此如果遇上行銷檔期,伺服器本身就已經快要Hold不住,就更要注意提前3-5天提交降低索引的要求。如果想要瞭解更多官方的文件說明,可以參考這裡。

歡迎標明出處,轉載分享。
自由揚AntonyLin

自由揚AntonyLin

文章: 119

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *