您看到Google提取了什麼嗎?

機器人蜘蛛

本月我們遇到了兩個問題,即我們客戶的網站對訪問者來說是完美的,但是 Google Search Console 正在報告錯誤。 在一種情況下,客戶端試圖使用 Javascript 編寫一些內容。 在另一種情況下,我們發現另一個客戶端使用的託管正在正確地重定向訪問者……但不是 Googlebot。 結果,網站站長繼續生成 404 錯誤,而不是遵循我們實施的重定向。

Googlebot 是 Google 的網絡爬行機器人(有時也稱為“蜘蛛”)。 抓取是 Googlebot 發現要添加到 Google 索引的新頁面和更新頁面的過程。 我們使用大量計算機來獲取(或“抓取”)網絡上的數十億個頁面。 Googlebot 使用算法過程:計算機程序確定要抓取哪些網站、抓取頻率以及從每個網站抓取多少頁面。 來自谷歌: Googlebot的

Google會從瀏覽器中獲取,抓取和捕獲您的頁面內容。 雖然Google可以 腳本,它確實 意味著它將永遠成功。 僅僅因為您在瀏覽器中測試了重定向並且它有效,並不意味著 Googlebot 正確地重定向了該流量。 在我們弄清楚他們在做什麼之前,我們的團隊和託管公司之間進行了一些對話……而找出答案的關鍵是使用 通過谷歌獲取信息 網站管理員中的工具。

通過谷歌獲取信息

Google抓取方式工具可讓您在網站內輸入路徑,查看Google是否能夠對其進行爬網,並像Google一樣實際查看所爬網的內容。 對於我們的第一個客戶,我們能夠證明Google並未按照他們的期望閱讀腳本。 對於我們的第二個客戶,我們能夠採用另一種方​​法來重定向Googlebot。

如果你看到 抓取錯誤 在網站站長中(位於“運行狀況”部分),使用“以Google身份提取”來測試您的重定向並查看Google正在檢索的內容。

你覺得呢?

本網站使用Akismet來減少垃圾郵件。 了解您的評論如何處理.