跟蹤鏈接

2022-07-11    分類: 網(wǎng)站建設

今天成都網(wǎng)站設計--創(chuàng)新互聯(lián)小編說說跟蹤鏈接

我了抓取網(wǎng)上盡量多的頁面,搜索引擎蜘蛛會跟蹤頁面上的鏈接,從一個頁面爬行到下一個頁面,就好像蜘蛛在蜘蛛網(wǎng)上爬行那樣,這也就是搜索引擎蜘蛛這個名稱的由來。整個互聯(lián)網(wǎng)是由相互連接的網(wǎng)站及頁面組成。從理論上說,蜘蛛從任何一個頁面出發(fā),順著鏈接都可以爬行到網(wǎng)上的所有頁面。當然,由于網(wǎng)站及頁面鏈接結構異常復雜,蜘蛛需要采取一定的爬行策略才能遍歷網(wǎng)上的所有頁面。

最簡單的爬行便利策略分為兩種,一種是深度優(yōu)先,另一種是廣度優(yōu)先。所謂的深度優(yōu)先,指的蜘蛛沿著發(fā)現(xiàn)的鏈接一直往向前爬行,直到前面在也沒有其他鏈接,然后返回到第一個頁面,沿著另一個鏈接再一直往前爬行。

如圖一所示,蜘蛛跟蹤鏈接,從A頁面爬行到A1,A2,A3,A4,到A4頁面后。已經(jīng)冒雨其它頁面可以跟蹤就返回A頁面,順著頁面上的另一個鏈接,爬行到B1,B2,B3.B4.在深度優(yōu)先策略中,蜘蛛一直爬到無法再向前,才返回爬另一條線。

廣度優(yōu)先是指蜘蛛在一個頁面上發(fā)現(xiàn)多個鏈接時,不是順著一個鏈接一直向前,而是把頁面上所有第一層的鏈接都爬個遍,然后在沿著第二層頁面上發(fā)現(xiàn)的鏈接爬向第三層頁面。

成都網(wǎng)站設計--創(chuàng)新互聯(lián)小編發(fā)張圖給大家看看,如下圖所示,蜘蛛從A頁面順著鏈接爬行到A1,B1,C1頁面,直到A頁面上的所有鏈接都爬行完,然后再從A1 頁面發(fā)現(xiàn)的下一層鏈接,爬行A2 A3..........

從理論上說,無論是深度優(yōu)先還是廣度優(yōu)先,只要給蜘蛛足夠的世界,都能爬完整個互聯(lián)網(wǎng)。在實際的工作中,蜘蛛的帶寬資源,時間都不是無限的,也不可能爬完所有的頁面。實際上大的搜索引擎也只爬行和收錄了互聯(lián)網(wǎng)的一小部分。深度優(yōu)先和廣度優(yōu)先通常是混合使用的,這樣即可以照顧到盡量多的網(wǎng)站(廣度優(yōu)先)也能照顧到一部分網(wǎng)站的內(nèi)頁(深度優(yōu)先),同時也會考慮頁面權重,網(wǎng)站規(guī)模。外鏈,更新等因素。網(wǎng)站建設好后要做的事情很多,要學的東西也很多,大家好好的看看我寫的文章。

網(wǎng)頁題目:跟蹤鏈接
URL分享:http://muchs.cn/news/176377.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供電子商務、微信公眾號Google、品牌網(wǎng)站制作、網(wǎng)站內(nèi)鏈、網(wǎng)站改版

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

網(wǎng)站托管運營