網(wǎng)站robots協(xié)議對SEO優(yōu)化的影響

2013-11-24    分類: 網(wǎng)站建設(shè)

在搭建網(wǎng)站時,如果使用的是模板系統(tǒng),那么它的源文件中一般都會包含一個名為:robots的txt文件,那么這個文件是起到什么作用呢?它對優(yōu)化的影響又是怎樣的?

 

首先,robots.txt協(xié)議對于搜索引擎蜘蛛來說,就相當(dāng)于一份入境申明,在文本中,它表明了,網(wǎng)站中哪些頁面允許蜘蛛前往、哪些頁面允許拍照(也就是索引和抓取)、那些頁面是蜘蛛的禁區(qū)。蜘蛛在爬行、抓取網(wǎng)站內(nèi)容之前,都會閱讀robots協(xié)議,然后前往允許其爬行的頁面。

 

然后,我們再來說說robots協(xié)議對seo優(yōu)化的影響,前面我們已經(jīng)說到,robots協(xié)議可以限制搜索引擎能讀取哪些頁面,那些被限制的頁面,搜索引擎都無法訪問,更別談抓取和收錄了。所以,被robots協(xié)議限制訪問的頁面,一般都不會被搜索引擎收錄(首頁、欄目首頁除外),其中的內(nèi)容也不會對SEO優(yōu)化產(chǎn)生有益影響。也就是說在robots協(xié)議限制區(qū)域更新內(nèi)容,對于SEO優(yōu)化來說是無用功。

 網(wǎng)站robots協(xié)議對SEO優(yōu)化的影響

所以,如果我們非常依賴于搜索引擎的流量,那么我們最好將我們的所有對外展示頁面都設(shè)置為允許搜索引擎訪問,這樣才可以將我們的每一次更新,都轉(zhuǎn)化為網(wǎng)站排名的加分。

 

最后,還需提到的一點,就是如果您的網(wǎng)站,知名度足夠大,粉絲數(shù)量足夠多,那么即使您所有頁面都不允許搜索引擎蜘蛛訪問,也可以在搜索引擎獲取非常多的流量,這其中的代表網(wǎng)站:淘寶網(wǎng),便是如此。

分享標題:網(wǎng)站robots協(xié)議對SEO優(yōu)化的影響
當(dāng)前地址:http://www.muchs.cn/news/4614.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設(shè)計公司、小程序開發(fā)云服務(wù)器、企業(yè)網(wǎng)站制作、面包屑導(dǎo)航、App設(shè)計

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

網(wǎng)站托管運營