robots文件的概念及作用

2013-06-08    分類(lèi)： 網(wǎng)站建設(shè)

　　robots文件的概念及作用。在seo優(yōu)化過(guò)程中經(jīng)常會(huì)用到robots文件，那什么是robots文件，對(duì)seo優(yōu)化有什么作用呢?今天創(chuàng)新互聯(lián)工程師就來(lái)跟大家普及下robots文件的概念及作用：

robots文件的概念及作用

　　什么是robots文件

　　robots文件是網(wǎng)站和搜索引擎之間的協(xié)議，也是搜索引擎爬蟲(chóng)爬行網(wǎng)站第一個(gè)訪問(wèn)的文件，官方叫做爬蟲(chóng)協(xié)議或者是機(jī)器人協(xié)議，robots的全稱(chēng)是“網(wǎng)絡(luò)爬蟲(chóng)排除標(biāo)準(zhǔn)”(Robots Exclusion Protocol)，我們所做的任何網(wǎng)站都可以通過(guò)robots協(xié)議告訴搜索引擎我們網(wǎng)站的哪些內(nèi)容可以訪問(wèn)，哪些內(nèi)容不能訪問(wèn)。

　　robots文件的作用

　　1、可以屏蔽網(wǎng)站內(nèi)一些打不開(kāi)的鏈接，也就是死鏈接

　　2、可以屏蔽搜索引擎蜘蛛訪問(wèn)網(wǎng)站內(nèi)重復(fù)的內(nèi)容和重復(fù)的頁(yè)面

　　3、阻止搜索引擎訪問(wèn)網(wǎng)站的后臺(tái)內(nèi)容

　　4、阻止搜索引擎訪問(wèn)網(wǎng)站的隱私性的內(nèi)容。

　　5、告訴搜索引擎那些內(nèi)容是需要被訪問(wèn)的

　　robots文件重要性

　　因此我們作為SEO人員建立robots.txt文件是很有必要的，網(wǎng)站中重復(fù)頁(yè)面、重復(fù)的內(nèi)容或者404錯(cuò)誤頁(yè)面都可以通過(guò)robots文件來(lái)屏蔽或阻止訪問(wèn)，否則搜索引擎蜘蛛就會(huì)認(rèn)為該網(wǎng)站價(jià)值較低，從而導(dǎo)致搜索引擎給網(wǎng)站的評(píng)價(jià)降低，這也是我們SEO人員經(jīng)常聽(tīng)到的一個(gè)詞語(yǔ)“降低網(wǎng)站權(quán)重”，網(wǎng)站的權(quán)重降低了，就會(huì)直接導(dǎo)致我們的網(wǎng)站排名下降

文章題目：robots文件的概念及作用
分享鏈接：http://www.muchs.cn/news16/1566.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供外貿(mào)網(wǎng)站建設(shè)、云服務(wù)器、標(biāo)簽優(yōu)化、小程序開(kāi)發(fā)、企業(yè)網(wǎng)站制作、網(wǎng)站制作

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話(huà)：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)