在檢索網站的網頁之前,我們已嘗試檢查 robots.txt 檔案,以確保不會檢索 robots.txt 檔案所排除的網頁。不過,在我們嘗試擷取您的 robots.txt 檔案時,伺服器卻傳回 5xx (無法連上) 錯誤。為確保不檢索該檔案所列的網頁,我們已延後檢索作業。
您的主機供應商可能封鎖了 Googlebot,或者其防火牆設定發生問題。
注意:如果 robots.txt 檔案在瀏覽器中呈現的內容與 Google 看到的內容不同,請與代管服務商合作,移除任何會向不同使用者代理程式顯示不同 robots.txt 內容的伺服器規則。