您看到Google提取了什麼嗎?
本月我們遇到了兩個問題,我們的客戶網站對訪問者來說工作正常,但是 Google Search Console 正在報告錯誤。 在一種情況下,客戶端嘗試使用 JavaScript 編寫一些內容。 在另一種情況下,我們發現另一個客戶端正在使用的託管正確地重定向了訪客......但不是 Googlebot。 結果,網站管理員繼續產生 404 錯誤,而不是遵循我們實施的重定向。
Googlebot是Google的網絡抓取機器人(有時也稱為“蜘蛛”)。 抓取是Googlebot發現要添加到Google索引的新頁面和更新頁面的過程。 我們使用大量計算機來獲取(或“抓取”)網絡上數十億個頁面。 Googlebot使用算法過程:計算機程序確定要爬網的站點,從每個站點獲取的頻率以及獲取的頁面數量。 來自Google: Googlebot的
Google會從瀏覽器中獲取,抓取和捕獲您的頁面內容。 雖然Google可以 爬 腳本,它確實 任何監管機構都不批准 意味著它將永遠成功。 僅僅因為您在瀏覽器中測試了重定向並且它有效,並不意味著 Googlebot 正確地重定向了該流量。 在我們弄清楚他們在做什麼之前,我們的團隊和託管公司之間進行了一些對話……而找出答案的關鍵是使用
通過谷歌獲取信息 網站管理員中的工具。Fetch as Google 工具允許您在您的網站中輸入路徑,查看 Google 是否能夠抓取它,並像 Google 一樣實際查看抓取的內容。 對於我們的第一個客戶,我們能夠證明 Google 並沒有像他們希望的那樣閱讀腳本。 對於我們的第二個客戶,我們能夠使用不同的方法來重定向 Googlebot。
如果你看到 抓取錯誤 在網站站長中(位於“運行狀況”部分),使用“以Google身份提取”來測試您的重定向並查看Google正在檢索的內容。