詳細(xì)羅列出各個(gè)搜索引擎蜘蛛日志及服務(wù)器常見狀態(tài)碼含義

其實(shí)我們做seo網(wǎng)站優(yōu)化的一般來說都是一個(gè)全知全能的職位，因?yàn)樽鰞?yōu)化做排名影響的因素太多了，就比如我們今天要講的課題，日志的分析如果不會(huì)分析看不懂蜘蛛的爬行軌跡，那么在優(yōu)化的過程中出現(xiàn)問題，就很有可能思路是錯(cuò)的而不自知。

IIS日志的用途就是能夠觀察搜索引擎的蜘蛛來我們網(wǎng)站的爬取情況，可以更近距離的分析和接觸蜘蛛。爬取次數(shù)，爬取時(shí)間點(diǎn)，爬取高峰期，爬取反應(yīng)出來的HTTP狀態(tài)碼，為我們帶來清晰的分析便利。

一、各大搜索引擎的蜘蛛名稱：

百度(Baidu)爬蟲名稱(Baiduspider)

谷歌(Google)爬蟲名稱(Googlebot)

雅虎(Yahoo)爬蟲名稱(YahooSlurp)

有道(Yodao)蜘蛛名稱(YodaoBot)

搜狗(sogou)蜘蛛名稱(sogouspider)

MSN的蜘蛛名稱：msnbot

二、IIS分析：

案例日志：61.135.168.22--[11/Jan/2009:04:02:45+0800]"GET/thread-7303-1-1.htmlHTTP/1.1"2008450"-""Baiduspider(+http:-www-baidu-com/search/spider.htm)"

分析：

1、61.135.168.22是訪問了是服務(wù)器IP為這個(gè)的網(wǎng)站.

2、11/Jan/2009:04:02:45表示蜘蛛爬行時(shí)間

3、GET/thread-7303-1-1.htmlHTTP，表示蜘蛛抓取了這個(gè)頁面。

4、200狀態(tài)碼表示蜘蛛抓取頁面成功;404表示蜘蛛抓取頁面失敗。

5、8450表示此次抓取了8450個(gè)字節(jié)

6、Baiduspider(+http:-www-baidu-com/search/spider.htm)表示百度蜘蛛的名稱

三、基本狀態(tài)碼：

200：請(qǐng)求已經(jīng)完成，蜘蛛訪問頁面正常

301：已經(jīng)移動(dòng)，永久重定向

302：臨時(shí)重定向

304：蜘蛛爬取后發(fā)現(xiàn)，頁面沒有修改

305：使用代理

400：請(qǐng)求錯(cuò)誤

404：找不到頁面

四、IIS詳細(xì)狀態(tài)碼含義：

100-表示已收到請(qǐng)求的一部分，正在繼續(xù)發(fā)送余下部分。

101-切換協(xié)議。

2XX-成功服務(wù)器成功地接受了客戶端請(qǐng)求。(只要是2XX的狀態(tài)，都表示成功)

200-確定?？蛻舳苏?qǐng)求已成功。

201-已創(chuàng)建。

202-已接受。

203-非權(quán)威性信息。

204-無內(nèi)容。

205-重置內(nèi)容。

206-部分內(nèi)容。

300-針對(duì)收到請(qǐng)求，服務(wù)器可執(zhí)行多種操作。

301-永久移動(dòng)轉(zhuǎn)移，請(qǐng)求的內(nèi)容已永久移動(dòng)其他新位置。

302-臨時(shí)移動(dòng)轉(zhuǎn)移，請(qǐng)求的內(nèi)容已臨時(shí)移動(dòng)新的位置

304-未修改。自從上次請(qǐng)求后，請(qǐng)求的內(nèi)容未修改過。

307-臨時(shí)重定向。服務(wù)器目前從不同位置響應(yīng)請(qǐng)求，但請(qǐng)求者應(yīng)繼續(xù)使用原有位置來進(jìn)行以后的請(qǐng)求。

400-錯(cuò)誤的請(qǐng)求。

401-訪問被拒絕。IIS定義了許多不同的401錯(cuò)誤，它們指明更為具體的錯(cuò)誤原因。這些具體的錯(cuò)誤代碼在瀏覽器中顯示，但不在IIS日志中顯示：

401.1-登錄失敗。

401.2-服務(wù)器配置導(dǎo)致登錄失敗。

401.3-由于ACL對(duì)資源的限制而未獲得授權(quán)。

401.4-篩選器授權(quán)失敗。

401.5-ISAPI/CGI應(yīng)用程序授權(quán)失敗。

401.7-訪問被Web服務(wù)器上的URL授權(quán)策略拒絕。這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

403-禁止訪問：IIS定義了許多不同的403錯(cuò)誤，它們指明更為具體的錯(cuò)誤原因：

403.1-執(zhí)行訪問被禁止。

403.2-讀訪問被禁止。

403.3-寫訪問被禁止。

403.4-要求SSL.

403.5-要求SSL128.

403.6-IP地址被拒絕。

403.7-要求客戶端證書。

403.8-站點(diǎn)訪問被拒絕。

403.9-用戶數(shù)過多。

403.10-配置無效。

403.11-密碼更改。

403.12-拒絕訪問映射表。

403.13-客戶端證書被吊銷。

403.14-拒絕目錄列表。

403.15-超出客戶端訪問許可。

403.16-客戶端證書不受信任或無效。

403.17-客戶端證書已過期或尚未生效。

403.18-在當(dāng)前的應(yīng)用程序池中不能執(zhí)行所請(qǐng)求的URL.這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

403.19-不能為這個(gè)應(yīng)用程序池中的客戶端執(zhí)行CGI.這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

403.20-Passport登錄失敗。這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

404-未找到請(qǐng)求的內(nèi)容。

404.0-未找到文件或目錄。

404.1-無法在所請(qǐng)求的端口上訪問Web站點(diǎn)。

404.2-Web服務(wù)擴(kuò)展鎖定策略阻止本請(qǐng)求。

404.3-MIME映射策略阻止本請(qǐng)求。

405-用來訪問本頁面的HTTP謂詞不被允許(方法不被允許)

406-客戶端瀏覽器不接受所請(qǐng)求頁面的MIME類型。

407-要求進(jìn)行代理身份驗(yàn)證。

412-前提條件失敗。

413-請(qǐng)求實(shí)體太大。

414-請(qǐng)求URI太長。

415-不支持的媒體類型。

416-所請(qǐng)求的范圍無法滿足。

417-執(zhí)行失敗。

423-鎖定的錯(cuò)誤。

500-服務(wù)器內(nèi)部錯(cuò)誤。

500.12-應(yīng)用程序正忙于在Web服務(wù)器上重新啟動(dòng)。

500.13-Web服務(wù)器太忙。

500.15-不允許直接請(qǐng)求Global.asa.

500.16-UNC授權(quán)憑據(jù)不正確。這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

500.18-URL授權(quán)存儲(chǔ)不能打開。這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

500.100-內(nèi)部ASP錯(cuò)誤。

501-服務(wù)器無法完成請(qǐng)求的功能。

502-服務(wù)器用作網(wǎng)關(guān)或代理服務(wù)器時(shí)收到了無效響應(yīng)。

502.1-CGI應(yīng)用程序超時(shí)。

502.2-CGI應(yīng)用程序出錯(cuò)。

503-服務(wù)不可用。這個(gè)錯(cuò)誤代碼為IIS6.0所專用。

504-網(wǎng)關(guān)超時(shí)。

505-HTTP版本不受支持。

當(dāng)前名稱：詳細(xì)羅列出各個(gè)搜索引擎蜘蛛日志及服務(wù)器常見狀態(tài)碼含義
本文來源：http://muchs.cn/news/253108.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供全網(wǎng)營銷推廣、標(biāo)簽優(yōu)化、服務(wù)器托管、品牌網(wǎng)站建設(shè)、定制網(wǎng)站、App開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)