網(wǎng)站蜘蛛日志分析步驟!

2023-04-02    分類： 網(wǎng)站建設(shè)

對于做優(yōu)化的人來說，網(wǎng)站日志的分析相比都不陌生，日志分析包含著網(wǎng)站的數(shù)據(jù)整體的情況診斷，可以方便我們查看分析網(wǎng)站的各種因素。SEO優(yōu)化其網(wǎng)站數(shù)據(jù)分析中包含了一個是對于蜘蛛的日志分析，其分析結(jié)果為查看蜘蛛爬行網(wǎng)站時經(jīng)過文件與鏈接及其蜘蛛IP狀態(tài)碼，其也是對網(wǎng)站必經(jīng)之路，SEO優(yōu)化網(wǎng)站想提升搜索引擎對站點(diǎn)的愛好，展現(xiàn)優(yōu)質(zhì)內(nèi)容，摒棄不利于優(yōu)化排名內(nèi)容;滿足蜘蛛爬行需求而來;

網(wǎng)站蜘蛛日志分析

什么是網(wǎng)站蜘蛛日志：

網(wǎng)站蜘蛛日志是站點(diǎn)web服務(wù)器所接收處理器的請求以及運(yùn)營的原始信息記錄，一般以log后綴結(jié)尾的文件，準(zhǔn)確來講，應(yīng)該服務(wù)自動抓取記錄;(簡單來說就是蜘蛛每日對網(wǎng)站訪問爬行動態(tài))

為什么要分析網(wǎng)站日志?

網(wǎng)站蜘蛛日志分析能看到站點(diǎn)的不足，以及站點(diǎn)的運(yùn)營情況，網(wǎng)站服務(wù)器是否出現(xiàn)異常蛛爬去情況、停留時間、爬取了哪些頁面、用戶的訪問時間、訪問頁面、訪問ip、網(wǎng)站代碼是否異常等等。

怎么進(jìn)行日志分析?

一般網(wǎng)站日志存儲在服務(wù)器中的根目錄里面的log文件;下載之后使用日志分析工具從而針對數(shù)據(jù)分析蜘蛛的爬行動態(tài)!

網(wǎng)站蜘蛛的名稱：

百度(Baidu)爬蟲名稱(Baiduspider)

谷歌(Google)爬蟲名稱(Googlebot)

雅虎(Yahoo)爬蟲名稱(Yahoo Slurp)

有道(Yodao)蜘蛛名稱(YodaoBot)

搜狗(sogou)蜘蛛名稱(sogou spider)

MSN的蜘蛛名稱：msnbot

網(wǎng)站日志狀態(tài)碼

網(wǎng)站日志中的狀態(tài)服務(wù)代碼：

200 - 服務(wù)器成功返回網(wǎng)頁

404 - 請求的網(wǎng)頁不存在

503 - 服務(wù)器暫時不可用

500 - 服務(wù)器出現(xiàn)錯誤

SEO如何分析網(wǎng)站蜘蛛日志：

61.135.168.22 - - [11/Feb/2018:04:02:45 +0800] " /SEOyouhua/161.html HTTP/1.1" 200 8450 "-" "Baiduspider+(+https://www.baidu.com/search/spider.htm)" 以上的代碼是我從自己的空間下載的一段日志，現(xiàn)在與大家一起來分析一下，這段代碼具體意思如下：

61.135.168.22：來路IP，也就是說這個用戶或者蜘蛛進(jìn)來我們網(wǎng)站的IP是多少。

11/Feb/2018:04:02:45：時間2018年2月11日早上4點(diǎn)02分45秒。

200：表示能夠正常訪問你的網(wǎng)站。

8450：表示此次加載了8450個字節(jié)。

Baiduspider：百度蜘蛛的全名。

以上是網(wǎng)站日志分析的細(xì)節(jié)，那么以上的內(nèi)容有兩點(diǎn)，是我們需要注意的，同時在分析的過程中也需要記住的。那就是狀態(tài)代碼和程序名的解析。

如何使網(wǎng)站蜘蛛經(jīng)常光顧站點(diǎn)：

那么蜘蛛會經(jīng)常進(jìn)行光顧的，SEO看懂?dāng)?shù)據(jù)之后發(fā)現(xiàn)網(wǎng)站蜘蛛日志中，訪問量很少，那么我們需要對蜘蛛進(jìn)行吸引，蜘蛛是個貪吃的家伙，所以需要三點(diǎn)做好，蜘蛛會經(jīng)常進(jìn)行光顧的;

1、定時更新：如果是博客站點(diǎn)或者是小網(wǎng)站，定時更新內(nèi)容不需要太多，1-3篇定時定點(diǎn)的進(jìn)行從而養(yǎng)成蜘蛛的爬行習(xí)慣;如果是大型站點(diǎn)，就需要大量更新內(nèi)容，視網(wǎng)站情況而定;

2、網(wǎng)站地圖：吸引蜘蛛爬行網(wǎng)站，通過網(wǎng)站地圖來為蜘蛛進(jìn)行帶路引導(dǎo)，蜘蛛一般在抓取網(wǎng)站的時候，會首先抓取robots文件，所以將地圖放在robots里面是指引蜘蛛抓取地圖，從而爬行網(wǎng)站內(nèi)容;

3、外鏈引導(dǎo)：網(wǎng)站優(yōu)化從外部使蜘蛛進(jìn)入自己的網(wǎng)站頁面，通過使用外鏈平臺，發(fā)布純文本鏈接，蜘蛛在抓取平臺頁面時會進(jìn)入都我們的網(wǎng)站頁面引導(dǎo)蜘蛛進(jìn)行對網(wǎng)站進(jìn)行爬行;

網(wǎng)站蜘蛛日志分析，是SEO通過數(shù)據(jù)來對網(wǎng)站進(jìn)行優(yōu)化從而針對蜘蛛進(jìn)行處理錯誤的一個基礎(chǔ)技術(shù);網(wǎng)站蛻變之路是必經(jīng)SEO網(wǎng)站蜘蛛日志分析的，站點(diǎn)之中有較多的文件與文檔不會蜘蛛不會喜歡抓取，從而需要進(jìn)行系統(tǒng)的排除;

新聞名稱：網(wǎng)站蜘蛛日志分析步驟!
文章出自：http://www.muchs.cn/news12/249712.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供關(guān)鍵詞優(yōu)化、品牌網(wǎng)站制作、服務(wù)器托管、云服務(wù)器、網(wǎng)站制作、網(wǎng)站維護(hù)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)

h5響應(yīng)式網(wǎng)站建設(shè)