百度抓取異常工具升級(jí)版上線
作者：百度站長(zhǎng)平臺(tái) 發(fā)布時(shí)間：2013年5月28日
各位網(wǎng)站管理員：
很高興的通知大家，百度站長(zhǎng)平臺(tái)抓取異常工具升級(jí)上線。升級(jí)之后的抓取異常工具將為站長(zhǎng)提供更詳細(xì)的抓取異常原因及異常的頁(yè)面，便于站長(zhǎng)更快捷的解決網(wǎng)站在百度中的抓取異常問(wèn)題，避免對(duì)網(wǎng)站造成收錄及流量的損失。
本次工具亮點(diǎn)：
1、提供更多的抓取異常分析：改版之后提供8種抓取異常的原因，幫助站長(zhǎng)更快的發(fā)現(xiàn)及定位原因，解決網(wǎng)站的抓取問(wèn)題。
2、提供更詳細(xì)的異常頁(yè)面。
抓取異常工具地址：http://zhanzhang.baidu.com/crawl/index
一、什么是抓取異常？為什么要關(guān)注網(wǎng)站的抓取異常？
對(duì)于網(wǎng)站中可正常訪問(wèn)的頁(yè)面，baiduspider抓取的結(jié)果應(yīng)與普通用戶訪問(wèn)的內(nèi)容是一致的，當(dāng)baiduspider抓取的內(nèi)容與普通用戶訪問(wèn)的內(nèi)容不一致時(shí)，即為該網(wǎng)站的內(nèi)容在百度中存在抓取異常。
對(duì)于大量?jī)?nèi)容無(wú)法正常抓取的網(wǎng)站，搜索引擎會(huì)認(rèn)為網(wǎng)站存在用戶體驗(yàn)上的缺陷，并降低對(duì)網(wǎng)站的評(píng)價(jià)，在抓取、索引、權(quán)重上都會(huì)受到一定程度的負(fù)面影響，最終影響到網(wǎng)站從百度獲取的流量。
二、抓取異常工具升級(jí)之后能夠提供哪些異常？
1、404錯(cuò)誤：當(dāng)baiduspider在抓取您網(wǎng)站時(shí)，發(fā)現(xiàn)大量的404頁(yè)面（協(xié)議死鏈或內(nèi)容死鏈）時(shí)，會(huì)在抓取異常工具中將這類頁(yè)面進(jìn)行展示，建議通過(guò)百度站長(zhǎng)平臺(tái)--死鏈工具提交死鏈的方式進(jìn)行處理，以便搜索引擎更快地發(fā)現(xiàn)死鏈，減少死鏈對(duì)用戶以及搜索引擎造成的負(fù)面影響。
2、服務(wù)器連接異常：是指baiduspider在連接您的網(wǎng)站時(shí)發(fā)生的無(wú)法正常連接的問(wèn)題。服務(wù)器連接異常會(huì)有兩種情況：一種是站點(diǎn)不穩(wěn)定，Baiduspider嘗試連接您網(wǎng)站的服務(wù)器時(shí)出現(xiàn)暫時(shí)無(wú)法連接的情況；一種是Baiduspider一直無(wú)法連接上您網(wǎng)站的服務(wù)器。
3、網(wǎng)絡(luò)運(yùn)營(yíng)商異常：是指Baiduspider通過(guò)電信或網(wǎng)通無(wú)法訪問(wèn)您網(wǎng)站的問(wèn)題。如果出現(xiàn)這種情況，您需要與網(wǎng)絡(luò)服務(wù)運(yùn)營(yíng)商（電信或網(wǎng)通）進(jìn)行聯(lián)系，或者購(gòu)買擁有雙線服務(wù)的空間或者購(gòu)買cdn服務(wù)。
4、DNS異常：是指Baiduspider無(wú)法解析您網(wǎng)站的IP，從而無(wú)法正常抓取收錄您網(wǎng)站的內(nèi)容。可能是您的網(wǎng)站IP地址錯(cuò)誤，或者域名服務(wù)商把Baiduspider封禁。
5、IP封禁：限制網(wǎng)絡(luò)的出口IP地址，禁止該IP段的使用者進(jìn)行內(nèi)容訪問(wèn)。
6、UA封禁：UA即為用戶代理（User-Agent），服務(wù)器通過(guò)UA識(shí)別訪問(wèn)者的身份。當(dāng)網(wǎng)站針對(duì)指定UA的訪問(wèn)，返回異常頁(yè)面（如403，500）或跳轉(zhuǎn)到其他頁(yè)面的情況，即為UA封禁。
7、異常跳轉(zhuǎn)：將網(wǎng)絡(luò)請(qǐng)求重新指向其他位置即為跳轉(zhuǎn)。
8、其他異常
展示圖如下：
抓取異常圖.png
來(lái)源：百度搜索資源平臺(tái)
