×

搜索引擎蜘蛛抓取異常的原因和解決辦法是什么

  • 作者:新網(wǎng)
  • 來(lái)源:新網(wǎng)
  • 瀏覽:100
  • 2018-02-27 17:24:30

搜索引擎蜘蛛抓取異常的原因和解決辦法是什么?網(wǎng)站優(yōu)化排名最經(jīng)常使用的一種方法就是發(fā)布優(yōu)質(zhì)文章,讓搜索引擎蜘蛛抓取形成百度快照得到一個(gè)好的排名,是什么導(dǎo)致搜索引擎蜘蛛抓取異常的?接下來(lái)為大家具體分析一下。

搜索引擎蜘蛛抓取異常的原因和解決辦法是什么?網(wǎng)站優(yōu)化排名最經(jīng)常使用的一種方法就是發(fā)布優(yōu)質(zhì)文章,讓搜索引擎蜘蛛抓取形成百度快照得到一個(gè)好的排名,是什么導(dǎo)致搜索引擎蜘蛛抓取異常的?接下來(lái)為大家具體分析一下。
 

22c6000402bba5ff1692.gif

DNS異常
當(dāng)搜索引擎蜘蛛無(wú)法解析您網(wǎng)站的IP時(shí),會(huì)出現(xiàn)DNS異常??赡苁悄木W(wǎng)站IP地址錯(cuò)誤,或者域名服務(wù)商把搜索引擎蜘蛛封禁。請(qǐng)使用WHOIS或者h(yuǎn)ost查詢自己網(wǎng)站IP地址是否正確且可解析,如果不正確或無(wú)法解析,請(qǐng)與域名注冊(cè)商聯(lián)系,更新您的IP地址。
IP封禁
IP封禁為:限制網(wǎng)絡(luò)的出口IP地址,禁止該IP段的使用者進(jìn)行內(nèi)容訪問(wèn),在這里特指封禁了搜索引擎蜘蛛IP。當(dāng)您的網(wǎng)站不希望搜索引擎蜘蛛訪問(wèn)時(shí),才需要該設(shè)置,如果您希望搜索引擎蜘蛛訪問(wèn)您的網(wǎng)站,請(qǐng)檢查相關(guān)設(shè)置中是否誤添加了搜索引擎蜘蛛IP。也有可能是您網(wǎng)站所在的空間服務(wù)商把百度IP進(jìn)行了封禁,這時(shí)您需要聯(lián)系服務(wù)商更改設(shè)置。
UA封禁
UA即為用戶代理(User-Agent),服務(wù)器通過(guò)UA識(shí)別訪問(wèn)者的身份。當(dāng)網(wǎng)站針對(duì)指定UA的訪問(wèn),返回異常頁(yè)面(如403,500)或跳轉(zhuǎn)到其他頁(yè)面的情況,即為UA封禁。當(dāng)您的網(wǎng)站不希望搜索引擎蜘蛛訪問(wèn)時(shí),才需要該設(shè)置,如果您希望搜索引擎蜘蛛訪問(wèn)您的網(wǎng)站,useragent相關(guān)的設(shè)置中是否有搜索引擎蜘蛛 UA,并及時(shí)修改。
死鏈
頁(yè)面已經(jīng)無(wú)效,無(wú)法對(duì)用戶提供任何有價(jià)值信息的頁(yè)面就是死鏈接,包括協(xié)議死鏈和內(nèi)容死鏈兩種形式。
協(xié)議死鏈:頁(yè)面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死鏈,常見(jiàn)的如404、403、503狀態(tài)等。
內(nèi)容死鏈:服務(wù)器返回狀態(tài)是正常的,但內(nèi)容已經(jīng)變更為不存在、已刪除或需要權(quán)限等與原內(nèi)容無(wú)關(guān)的信息頁(yè)面。
對(duì)于死鏈,我們建議站點(diǎn)使用協(xié)議死鏈,并通過(guò)百度站長(zhǎng)平臺(tái)--死鏈工具向百度提交,以便百度更快地發(fā)現(xiàn)死鏈,減少死鏈對(duì)用戶以及搜索引擎造成的負(fù)面影響。
搜索引擎蜘蛛抓取異常的原因和解決辦法是什么?以上文章為大家介紹的內(nèi)容你都學(xué)會(huì)了嗎?如果有什么不懂的都可以直接聯(lián)系小編為你答疑解惑,希望這些文章對(duì)你有所幫助。
 

免責(zé)聲明:本文內(nèi)容由互聯(lián)網(wǎng)用戶自發(fā)貢獻(xiàn)自行上傳,本網(wǎng)站不擁有所有權(quán),也不承認(rèn)相關(guān)法律責(zé)任。如果您發(fā)現(xiàn)本社區(qū)中有涉嫌抄襲的內(nèi)容,請(qǐng)發(fā)送郵件至:operations@xinnet.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),本站將立刻刪除涉嫌侵權(quán)內(nèi)容。

免費(fèi)咨詢獲取折扣

Loading