如何有效利用 Google crawl budget?
分享 SEO 裏面的crawl budget的,首先講一下什麼是 crawl(爬行),Google 要去理解網站的時候,會用爬行這個動作,爬到很多不同網站上各頁面去了解分析網站的內容,當覺得網頁內容有價值,就會放入 Google 數據庫,當用戶做搜尋時,搜尋器就會從這個龐大的數據庫提取資料。
所以這個由 Google crawl 網站並放入資料庫的過程是很重要的。
有安裝 Google Search Console

如果你有安裝 Google Search Console,在設定會看到 about 的位置,現在仍然是 Googlebot desktop,2021年 5 月就應該會變成 Googlebot smartphone,即主要會用 smartphone 的制式做網站爬行。
新版本還有 一個報告 Crawl stats,以我為例,之前 90 天,Google 來爬過我的網站 15000 次檢查各方面,看到是否可順利爬到各處、檔案格式分類、桌面和手機版機械人都來過。
影片解説
怎樣可以好好利用 crawl 這個行為?

網站有很多內容,但不是每一頁內容都有價值,比如登入頁、免責聲明頁這類並沒有什麼特別價值,如果你經常調動這些內容推給 Google 引它來爬,久而久之 Google 會覺得網站內容沒意義沒新意或沒價值,就會減少來爬的次數,也就是減少給你的爬行 budget。

所謂的推給 Google 就是遞交 sitemap,裡面也會出現錯誤,比如我自己就有去不到的頁面、登入登出頁、我的帳戶等等,這些對 Google 是沒意義的。
延伸閲讀
建議:設定 no-index
所以你可以在網站設定這類頁面為 no-index,告訴 Google 雖然網站有幾百頁內容,但有幾十頁不需要放入資料庫,也不需要進來查看。
當你做了這個行動,Google 就會將爬入網站做分析的資源配置給有價值的內容,然後就會常來檢查更新。
這就是如何善用 Crawl budget 的方法,Google 常來檢查更新肯定對 SEO 有幫助。如果你也有資訊要分享,請在 comment 告訴我。