nofollow和robots有什么區(qū)別

nofollow和robots都有禁止讓搜索引擎抓取的含義，很多人總把nofollow和robots搞混淆了，下面就來說說nofollow和robots有什么區(qū)別？

在實(shí)際優(yōu)化工作之中，我們經(jīng)常會遇到一個頁面我們不想其被搜索引擎收錄的情況，在這種情況下，使用robots非常便捷，一勞永逸。因?yàn)槟阒灰趓obots中對該頁面設(shè)置了屏蔽抓取以后，不管你的這個頁面在網(wǎng)站中出現(xiàn)了多少次，，都不會被爬蟲抓取以及收錄；而如果這種情況下使用nofollow標(biāo)簽來進(jìn)行屏蔽的話，你會發(fā)現(xiàn)網(wǎng)站維護(hù)起來會異常麻煩，因?yàn)榫W(wǎng)站中的新頁面難免會有該鏈接，生成新的頁面都要加一次nofollow標(biāo)簽，一旦有一次遺漏了，就很有可能會被搜索引擎給收錄了。還有一種情況則相反，有一個頁面我們希望它正常被收錄獲得排名，但是因?yàn)橛械捻撁嬷嘘P(guān)于此鏈接的重復(fù)鏈接太多了，會造成不好的影響，這時候就不適合用robots來屏蔽了，而是應(yīng)該使用nofollow標(biāo)簽對部分重復(fù)鏈接進(jìn)行屏蔽。

nofollow針對的是訪問路徑進(jìn)行屏蔽，擋住百度蜘蛛等爬蟲的去路，而robots如同一個平臺，我們在這個平臺上對網(wǎng)站中的部分頁面進(jìn)行登記過了，以后但凡遇到這個鏈接頁面，你都不要再多管了。這里需要注意的是，robots只針對站內(nèi)頁面有效，不能屏蔽站外的鏈接，而nofollow沒有這個限制，這也是nofollow和robots比較重要的一個區(qū)別。

robots不僅可以屏蔽站內(nèi)的頁面還可以屏蔽特定蜘蛛及其他網(wǎng)站爬蟲程序的訪問。比如有的時候，可能你的網(wǎng)站帶寬較小，而在網(wǎng)站日志中看到某個沒有用處的蜘蛛頻繁性地訪問你網(wǎng)站，從而讓服務(wù)器過于擁擠以至崩潰，這時就可以利用robots限制其訪問權(quán)限。除了可以限制爬蟲的訪問權(quán)限以外，還可以在robots中載明sitemap地址，更有利于蜘蛛注意到sitemap并且快速抓取網(wǎng)站的新內(nèi)容以及更新的頁面。

網(wǎng)頁名稱：nofollow和robots有什么區(qū)別
網(wǎng)站地址：http://www.muchs.cn/news39/250189.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供搜索引擎優(yōu)化、企業(yè)網(wǎng)站制作、品牌網(wǎng)站建設(shè)、關(guān)鍵詞優(yōu)化、靜態(tài)網(wǎng)站、企業(yè)建站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)