關於網頁可收錄檢測
頁面遲遲不出現在搜尋結果裡,先要用網頁可收錄檢測弄清:搜尋引擎到底能不能收錄它。新頁面沒流量、網站改版遷移之後、百度搜尋資源平臺或 Google Search Console 提示頁面被排除時,都可以用網頁可收錄檢測查一下。輸入網址,點“開始檢測”。
工具以谷歌蜘蛛和百度蜘蛛兩個身份抓取頁面並讀取 robots.txt,分別給出谷歌和百度的結論。不能收錄時,所有原因都會列出來:發生跳轉、狀態碼不是 200、被 robots.txt 禁止或 robots.txt 返回伺服器錯誤、meta 標籤或 X-Robots-Tag 響應頭裡有 noindex、canonical 指向其他頁面、不是 HTML、軟 404。頁面上的按鈕可以直接到百度和谷歌做 site: 查詢。它不能告訴你頁面現在是否已被收錄,這隻有搜尋引擎知道,請用 site: 查詢或到百度搜尋資源平臺檢視。要細查規則,用 Robots.txt 檢測。
網頁可收錄檢測怎麼用
- 1輸入網址
填希望被收錄的完整網址。
- 2點“開始檢測”
以谷歌蜘蛛和百度蜘蛛身份抓取,並讀取 robots.txt。
- 3看兩個結論
谷歌、百度各自給出可以收錄或無法收錄,以及原因。
- 4到搜尋引擎核對
用 site: 查詢按鈕核對,改完原因再檢測一次。
為什麼用熊仔工匠
- 百度谷歌分開判斷
規則和蜘蛛可能不同,所以給出兩個結論。
- 原因全列出
跳轉、狀態碼、robots.txt、noindex、canonical、軟 404 等。
- 響應頭也檢查
X-Robots-Tag 和針對某個蜘蛛的 meta 標籤都會讀。
- site: 快捷查詢
一鍵到百度或谷歌搜尋這個網址。