蜘蛛陷阱是什么，網(wǎng)站SEO如何避免蜘蛛陷阱

蜘蛛陷阱是對(duì)搜索引擎來(lái)說(shuō)的，盡管有些網(wǎng)站看上去高大上，很酷，但這可能會(huì)給搜索蜘蛛設(shè)置了大量的障礙，也就是

今天給大家說(shuō)的蜘蛛陷阱。

我們看看百度百科對(duì)蜘蛛陷阱的定義：“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物，通常是那些顯示網(wǎng)頁(yè)的技術(shù)方

法，很多瀏覽器在設(shè)計(jì)的時(shí)候考慮過(guò)這些因素，所以可能網(wǎng)頁(yè)界面看起來(lái)非常正常，但這些蜘蛛陷阱會(huì)對(duì)蜘蛛程序造成

障礙，如果消除這些蜘蛛陷阱，可以使蜘蛛程序收錄更多的網(wǎng)頁(yè)。

設(shè)想一下如果你去一個(gè)地方用百度地圖導(dǎo)航，結(jié)果地圖把你帶入一條荒無(wú)人煙的臭水溝里，你會(huì)怎么想。其實(shí)搜索引擎

蜘蛛和人一樣，如果讓蜘蛛掉進(jìn)了你設(shè)置的陷阱里，那么：蜘蛛很生氣，后果很?chē)?yán)重了！

一旦把蜘蛛惹急了，不是對(duì)你的網(wǎng)站進(jìn)行降權(quán)就是K站，所以說(shuō)蜘蛛大哥也不是好惹的。我們做SEO的還要心存敬畏之心

。

成都創(chuàng)新互聯(lián)公司是專(zhuān)業(yè)的長(zhǎng)豐網(wǎng)站建設(shè)公司，長(zhǎng)豐接單;提供成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站建設(shè),網(wǎng)頁(yè)設(shè)計(jì),網(wǎng)站設(shè)計(jì),建網(wǎng)站,PHP網(wǎng)站建設(shè)等專(zhuān)業(yè)做網(wǎng)站服務(wù);采用PHP框架,可快速的進(jìn)行長(zhǎng)豐網(wǎng)站開(kāi)發(fā)網(wǎng)頁(yè)制作和功能擴(kuò)展;專(zhuān)業(yè)做搜索引擎喜愛(ài)的網(wǎng)站,專(zhuān)業(yè)的做網(wǎng)站團(tuán)隊(duì),希望更多企業(yè)前來(lái)合作!

那么哪些是蜘蛛陷阱，如何預(yù)防？

1、各種跳轉(zhuǎn)

常見(jiàn)的網(wǎng)站跳轉(zhuǎn)方法例如：JS跳轉(zhuǎn)、Flash跳轉(zhuǎn)、302跳轉(zhuǎn)等，除301跳轉(zhuǎn)除外，因?yàn)樗撬阉饕嫱扑]和認(rèn)可的跳轉(zhuǎn)形式，它主要用在網(wǎng)站域名更改，利用301跳轉(zhuǎn)將老域名的權(quán)重全部繼承給新域名。除了301轉(zhuǎn)向很多的占用其他轉(zhuǎn)向欺騙用戶(hù)和搜索引擎，也是heimao的一種手段，所以建議大家不要使用，以免網(wǎng)站被K。除301之外的各種跳轉(zhuǎn)對(duì)搜索引擎來(lái)說(shuō)都是不利的，不利于蜘蛛的爬取，給蜘蛛制造了所謂的陷阱。

2、復(fù)雜的框架結(jié)構(gòu)

框架結(jié)構(gòu)就目前來(lái)說(shuō)算的上是網(wǎng)站建設(shè)界的老話題了，現(xiàn)如今建站愈來(lái)愈簡(jiǎn)單智能的時(shí)代，框架結(jié)構(gòu)逐漸落伍并且非常不利于蜘蛛爬取網(wǎng)站的內(nèi)容，所以框架結(jié)構(gòu)是被逼成了蜘蛛陷阱，老實(shí)講這不能怪它，可是也不得不怪它，這同時(shí)也驗(yàn)證了一句話：落后就要挨打。

3、動(dòng)態(tài)URL

我們知道，搜索引擎比較喜歡靜態(tài)網(wǎng)址，所以很多的動(dòng)態(tài)網(wǎng)站都會(huì)使用偽靜態(tài)設(shè)置。動(dòng)態(tài)URL通俗的解釋就是網(wǎng)站鏈接中帶有各種參數(shù)、等號(hào)、問(wèn)號(hào)或者其它符號(hào)而長(zhǎng)度還很長(zhǎng)的鏈接，恰巧的是蜘蛛也喜歡這種鏈接，其實(shí)最根本的原因還是動(dòng)態(tài)URL不利于蜘蛛的爬取。

4、JS腳本

對(duì)于這一點(diǎn)可能存在一定的爭(zhēng)議。JS在網(wǎng)站建設(shè)中又離不開(kāi)

，因?yàn)樗転榫W(wǎng)站實(shí)現(xiàn)很多功能和特效，但是它不利于蜘蛛爬取內(nèi)容，不過(guò)它也可以用在網(wǎng)站的其他方面對(duì)咱們做SEO的還是有所幫助的，比如為了避免網(wǎng)站權(quán)重的分散，我們就可以用JS腳本阻止蜘蛛對(duì)該頁(yè)面的抓取，而就這一點(diǎn)來(lái)說(shuō)它又是網(wǎng)站SEO的好工具，所以對(duì)于JS腳本這一點(diǎn)還是自己掌握分寸吧！

5、頁(yè)面是frame框架結(jié)構(gòu)

網(wǎng)站使用的frame框架結(jié)構(gòu)，這種結(jié)構(gòu)雖然代碼精簡(jiǎn)，而且很方便更新維護(hù)網(wǎng)站，但是，這種結(jié)構(gòu)蜘蛛基本上抓不到這里面的內(nèi)容，特別是里面有那些重要內(nèi)容的時(shí)候，那更是對(duì)優(yōu)化很不利的。

6、必須要登陸才能訪問(wèn)

有些企業(yè)站和個(gè)人站的設(shè)置一定要注冊(cè)登錄后才能看到相關(guān)的文章內(nèi)容。這是絕對(duì)不可取的，這相當(dāng)于把蜘蛛關(guān)在大門(mén)外了，畢竟搜索引擎蜘蛛不是人，沒(méi)有那么智能，他不會(huì)自動(dòng)填寫(xiě)用戶(hù)名、密碼、驗(yàn)證碼，這種情況的頁(yè)面設(shè)置要特別是注意。嚴(yán)重的時(shí)候，蜘蛛不會(huì)光顧你的網(wǎng)站。

7、robots.txt書(shū)寫(xiě)錯(cuò)誤
robots文件是蜘蛛訪問(wèn)網(wǎng)站的第一個(gè)文件，這個(gè)文件告訴蜘蛛那些是可以抓取的，那些是不能抓的，robots文件編寫(xiě)會(huì)有一定的格式要求，如果編寫(xiě)錯(cuò)誤，也會(huì)禁止蜘蛛訪問(wèn)和抓取。

8、Flash
Flash基本上被淘汰了，但有的網(wǎng)站頁(yè)面使用Flash視覺(jué)效果是很正常的，比如用Flash做的Logo、廣告、圖表等，這些對(duì)搜索引擎抓取和收錄是沒(méi)有問(wèn)題的，很多網(wǎng)站的首頁(yè)是一個(gè)大的Flash文件，這種就叫蜘蛛陷阱，我們知道蜘蛛喜歡的是文字，雖然大的Flash效果看上去很漂亮，但搜索引擎無(wú)法讀取任何內(nèi)容，所以不提倡這種Flash做首頁(yè)圖片。

9、url層級(jí)太深
有的網(wǎng)頁(yè)沒(méi)有入口，而且距離網(wǎng)站的首頁(yè)又很遠(yuǎn)，這種頁(yè)面就相對(duì)較難被蜘蛛爬行到，嚴(yán)格意義上來(lái)說(shuō)這不屬于陷阱，但我們拿來(lái)說(shuō)一下吧，畢竟也影響蜘蛛的抓取。內(nèi)頁(yè)和首頁(yè)的點(diǎn)擊距離越近，越容易得到更多的首頁(yè)權(quán)重傳遞。良好的網(wǎng)站結(jié)構(gòu)可以讓網(wǎng)站更多的頁(yè)面被收錄。

10、強(qiáng)制使用cookies，
對(duì)于搜索引擎來(lái)說(shuō)是相當(dāng)于直接禁用了cookies的，而有些網(wǎng)站為了實(shí)現(xiàn)某些功能會(huì)采取強(qiáng)制cookies，比如說(shuō)跟蹤用戶(hù)訪問(wèn)路徑，記住用戶(hù)信息，甚至是盜取用戶(hù)隱私等，如果用戶(hù)在訪問(wèn)這類(lèi)站點(diǎn)時(shí)沒(méi)有啟用cookies，所顯示的頁(yè)面就會(huì)不正常，所以對(duì)于蜘蛛來(lái)講同樣的網(wǎng)頁(yè)無(wú)法正常訪問(wèn)。

和各種各樣的作弊手法，比如說(shuō)隱藏文字，隱藏鏈接等，采用偽裝網(wǎng)頁(yè)在判斷來(lái)訪者是蜘蛛還

是普通瀏覽器者而顯示不同的網(wǎng)頁(yè)，使用默認(rèn)錯(cuò)誤的404頁(yè)面等，同樣會(huì)給蜘蛛帶來(lái)爬行障礙。

綜上所述，是小編對(duì)蜘蛛陷阱的總結(jié)，可能不僅全面，之后隨著網(wǎng)絡(luò)技術(shù)的發(fā)展，還會(huì)出現(xiàn)其他的蜘蛛陷阱，對(duì)于站長(zhǎng)來(lái)說(shuō)蜘蛛就是我們的朋友，要善待它，他會(huì)給我們好的回報(bào)，如果我們虐待他，那么我們的網(wǎng)站優(yōu)化之路就注定坎坷。
防范蜘蛛陷阱是網(wǎng)絡(luò)優(yōu)化之必要條件。

文章名稱(chēng)：蜘蛛陷阱是什么，網(wǎng)站SEO如何避免蜘蛛陷阱
URL分享：http://www.muchs.cn/article44/sojjee.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站制作、網(wǎng)站維護(hù)、搜索引擎優(yōu)化、全網(wǎng)營(yíng)銷(xiāo)推廣、響應(yīng)式網(wǎng)站、網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)