怎么分析網站的日志

2017-02-26    分類: 網站建設

在闡發(fā)日記時,對付單日日記文件我們必要闡發(fā)的內容有:訪問次數(shù)、停馬上間、抓取量、目次抓取統(tǒng)計、頁面抓取統(tǒng)計、蜘蛛訪問IP、HTTP狀態(tài)碼、蜘蛛活潑時段、蜘蛛爬取路徑等;對付多日日記文件我們必要闡發(fā)的內容有:蜘蛛訪問次數(shù)趨向、停馬上間趨向、團體抓取趨向、各目次抓取趨向、抓取時間段、蜘蛛活潑周期等。
下面我們來看看網站日記怎樣闡發(fā)?
網站日記數(shù)據闡發(fā)解讀:
1、訪問次數(shù)、停馬上間、抓取量
從這三項數(shù)據中我們可以得知:均勻每次抓取頁面數(shù)、單頁抓取停馬上間和均勻每次停馬上間。
均勻每次抓取頁面數(shù)=總抓取量/訪問次數(shù)
單頁抓取停頓=每次停頓/每次抓取
均勻每次停馬上間=總停馬上間/訪問次數(shù)http://www.wxlykj.com
從這些數(shù)據我們可以看出蜘蛛的活潑水平、親和水平、抓取深度等,總訪問次數(shù)、停馬上間、抓取量越高、均勻抓取頁面、均勻停馬上間,評釋網站越受搜刮引擎喜好。而單頁抓取停馬上間評釋網站頁面訪問速率,時間越長,評釋網站訪問速率越慢,對搜刮引擎抓取收錄較倒霉,我們應只管即便進步網頁加載速率,淘汰單而立停馬上間,讓爬蟲資源更多的去抓取收錄。
別的,憑據這些數(shù)據我們還可以統(tǒng)計出一段時間內,網站的團體趨向體現(xiàn),如:蜘蛛訪問次數(shù)趨向、停馬上間趨向、抓取趨向。
2、目次抓取統(tǒng)計
通過日記闡發(fā)我們可以看到網站哪些目次受蜘蛛喜好、抓取目次深度、緊張頁面貌次抓取狀態(tài)、無效頁面貌次抓取狀態(tài)等。通過比擬目次下頁面抓取及收錄環(huán)境,我們可以發(fā)明更多題目。對付緊張目次,我們必要通過表里調解增長權重及爬??;對付無效頁面,在robots.txt中舉行屏蔽。
別的,通過多日日記統(tǒng)計,我們可以看到站表里舉動給目次帶來的結果,優(yōu)化是否公道,是否到達了預期結果。對付統(tǒng)一目次,以恒久時間段來看,我們可以看到該目次下頁面體現(xiàn),憑據舉動推測體現(xiàn)的緣故原由等。
3、頁面抓取
在網站日記闡發(fā)中,我們可以看到詳細被蜘蛛爬取的頁面。在這些頁面中,我們可以闡發(fā)出蜘蛛爬取了哪些必要被克制爬取的頁面、爬取了哪些無收錄代價頁面、爬取了哪些重復頁面url等,為充實使用蜘蛛資源我們必要將這些地點在robots.txt中克制爬取。
別的,我們還可以闡發(fā)未收錄頁面緣故原由,對付新文章,是由于沒有被爬取到而未收錄抑或爬取了但未放出。對付某些閱讀意義不大的頁面,大概我們必要它作為爬取通道,對付這些頁面,我們是否應該做Noindex標簽等。但從另一方面講,蜘蛛會弱智到靠這些偶然義的通道頁爬取頁面嗎,蜘蛛不懂sitemap?【對此,筆者有迷惑,求分享履歷】
4、蜘蛛訪問IP
曾經有人提出過通過蜘蛛的ip段來果斷網站的降權環(huán)境,笨鳥覺得這個意義不大,由于這個后知性太強了。并且降權更多應該從前三項數(shù)據來果斷,用單單一個ip段來果斷意義不大。IP闡發(fā)的更多用途應該是果斷是否存在收羅蜘蛛、假蜘蛛、惡意點擊蜘蛛等。
5、訪問狀態(tài)碼
蜘蛛常常出現(xiàn)的狀態(tài)碼如301、404等,出現(xiàn)這些狀態(tài)碼要實時處置處罰,以制止對網站造成壞的影響。
6、抓取時間段
通太過析比擬多個單日蜘蛛小時爬取量,我們可以相識到特定蜘蛛對付本網站在特定時間的活潑時段。通過比擬周數(shù)據,我們可以看到特定蜘蛛在一周中的活潑周期。相識這個,對付網站內容更新時間有肯定引導意義,而之前所謂小三大四等均為不科學說法。
7、蜘蛛爬取路徑
在網站日記中我們可以跟蹤到特定IP的訪問路徑,要是我們跟蹤特定蜘蛛的訪問路徑則能發(fā)明對付本網站布局下蜘蛛的爬取路徑偏好。由此,我們可以得當?shù)囊龑е┲氲呐廊÷窂?,讓蜘蛛更多的爬取緊張、有代價、新更新頁面。此中爬取路徑中我們雙可以闡發(fā)頁面物理布局路徑偏好以及url邏輯布局爬取偏好。通過這些,可以讓我們從搜刮引擎的視角去審視本身的網站。

名稱欄目:怎么分析網站的日志
本文來源:http://www.muchs.cn/news3/74453.html

成都網站建設公司_創(chuàng)新互聯(lián),為您提供品牌網站制作、商城網站、軟件開發(fā)、App開發(fā)、微信公眾號、定制開發(fā)

廣告

聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)

搜索引擎優(yōu)化