什么導致引擎蜘蛛抓取異常?網站發布高質量內容讓搜索引擎蜘蛛抓取就會讓網站有一個好的排名,導致搜索引擎蜘蛛抓取異常的原因有什么,接下來為大家具體分析一下。
什么導致引擎蜘蛛抓取異常?網站發布高質量內容讓搜索引擎蜘蛛抓取就會讓網站有一個好的排名,導致搜索引擎蜘蛛抓取異常的原因有什么,接下來為大家具體分析一下。
異常跳轉
將網絡請求重新指向其他位置即為跳轉。異常跳轉指的是以下幾種情況:
1)當前該頁面為無效頁面(內容已刪除、死鏈等),直接跳轉到前一目錄或者首頁,百度建議站長將該無效頁面的入口超鏈接刪除掉
2)跳轉到出錯或者無效頁面
注意:對于長時間跳轉到其他域名的情況,如網站更換域名,百度建議使用301跳轉協議進行設置。
其他異常:
1)針對百度refer的異常:網頁針對來自百度的refer返回不同于正常內容的行為。
2)針對百度ua的異常:網頁對百度UA返回不同于頁面原內容的行為。
3)JS跳轉異常:網頁加載了百度無法識別的JS跳轉代碼,使得用戶通過搜索結果進入頁面后發生了跳轉的情況。
4)壓力過大引起的偶然封禁:百度會根據站點的規模、訪問量等信息,自動設定一個合理的抓取壓力。但是在異常情況下,如壓力控制失常時,服務器會根據自身負荷進行保護性的偶然封禁。這種情況下,請在返回碼中返回503(其含義是“Service Unavailable”),這樣搜索引擎蜘蛛會過段時間再來嘗試抓取這個鏈接,如果網站已空閑,則會被成功抓取。
什么導致引擎蜘蛛抓取異常?在以前的文章中小編就為大家介紹過很多的導致引擎蜘蛛抓取異常的原因和解決辦法,看過了以上的文章你都學會了嗎?其實這些原因解決起來也是挺簡單的,只要我們找對了方法就能很快的解決了,希望以上文章對你有所幫助。
上一篇:如何進行網站導航優化
下一篇:網站活動運營的步驟有什么
免責聲明:本文內容由互聯網用戶自發貢獻自行上傳,本網站不擁有所有權,也不承認相關法律責任。如果您發現本社區中有涉嫌抄襲的內容,請發送郵件至:operations@xinnet.com進行舉報,并提供相關證據,一經查實,本站將立刻刪除涉嫌侵權內容。