2014-03-22 分類: 網站建設
站長們為了能夠更好的檢測網站優化的情況,幾乎每天都會做一日常的統計,而網站的抓取是否出現異常也是在這個數據統計的行列中,然后根據每日的記錄下來的情況,站長們還要做一些分析和優化措施。那么出現異常抓取的原因是什么?
什么是網站異常抓取?
這個就是在正常的條件下,百度蜘蛛所抓取的頁面與呈現給訪客的頁面內容是一樣的,但是除此之外的一切就是非正常情況,從而導致蜘蛛無法正常抓取頁面。這個樣子的就被稱為抓取異常,抓取異常存在的原因是什么?
用百度搜索資源平臺診斷網站的抓取異常情況,如果發現偶爾抓取失敗,則屬于正常情況,不會對網站的正常抓取和收錄造成影響。但如果抓取失敗出現持續性的,則要引起注意了,根據網站出現抓取異常的具體原因做具體的分析。
一、網絡異常
①、DNS異常:當網址出現了IP地址錯誤,或者域名服務商將搜索引擎封禁的其中一種情況時,就會導致搜索殷勤無法解析這個網站的IP底子,會出現dns異常。
②、鏈接超時:當服務器過載,或者是網絡不穩定等情況,就會導致搜索引擎無法抓到頁面。
③、抓取超時:一個網站頁面的加載速度一直時一個嚴重的問題,對用戶和搜索引擎的體驗是有著一個很大的影響,但是如果服務器過載,夸帶不足,搜索引擎雖成功建立了抓取請求,但是因為頁面的速度過慢,無法在第一時間內抓取頁面,從而導致抓取超時。
④、連接錯誤:當服務器運行不正常,導致搜索引擎無法連接上網站服務器,或者在連接之后,對方服務器拒絕你的請求,這些都會導致搜索引擎連接錯誤。
二、鏈接異常
①、服務器錯誤:因為服務器錯誤,導致網站出現了5XX類型的錯誤,在搜索引擎抓取時,正確的返回狀態碼是5XX。
②、找不到頁面:
頁面無法訪問,是比較典型的404錯誤。在搜索引擎抓取時,正確的返回狀態碼是404。
③、訪問被拒絕
搜索引擎抓取頁面時,所發出的請求被拒絕,導致網站出現403錯誤。在搜索引擎抓取時,正確的返回狀態碼是403。
④、其他錯誤
還可能發生其他的錯誤,導致網站出現4XX類型錯誤。在搜索引擎抓取時,正確的返回狀態碼是4XX,不包括403和404。
如果網站出現抓取異常的話,會讓搜索引擎認為這個網站,在用戶整體的一個體驗上是有著一些缺陷的,并且降低了對網站的評價,在抓取。索引、權重上都會受到一定程度的負面影響,從而影響到整個網站的流量。
文章來源:創新互聯優化
網頁名稱:網站出現抓取異常,有什么辦法可以避免
網頁鏈接:http://newbst.com/news6/6756.html
成都網站建設公司_創新互聯,為您提供用戶體驗、微信公眾號、服務器托管、靜態網站、網站維護、網站內鏈
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯
猜你還喜歡下面的內容