這一節(jié)我們來說說蜘蛛陷阱。那么到底什么是蜘蛛陷阱呢？“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物，通常是那些顯示網(wǎng)頁的技術(shù)方法，目前很多瀏覽器在設(shè)計(jì)的時(shí)候考慮過這些因素，所以可能網(wǎng)頁界面看起來非常正常，但這些蜘蛛陷阱會(huì)對(duì)蜘蛛程序造成障礙，如果消除這些蜘蛛陷阱，可以使蜘蛛程序收錄更多的網(wǎng)頁。SEO工作中，網(wǎng)頁被收錄是基礎(chǔ)工作，但對(duì)于搜索引擎來講，極少情況會(huì)100%收錄你網(wǎng)站的所有網(wǎng)頁，搜索引擎的爬蟲程序設(shè)計(jì)的再精巧，也難以逾越所謂的蜘蛛陷阱。

  一、常見的蜘蛛陷阱有哪些？

  （1）flash導(dǎo)航鏈接。

  當(dāng)然，我們這里說的是廣義的，是指有鏈接指向的所有網(wǎng)頁導(dǎo)航。各種各樣的，比如說flash主導(dǎo)航，比如說flash的引導(dǎo)頁上的導(dǎo)航等等。有些人就喜歡用比較炫的導(dǎo)航結(jié)構(gòu)，做了很好看的flash導(dǎo)航，看上去是不錯(cuò)，但是搜索引擎不能理解到底這個(gè)flash是干什么的，自然搜索引擎如果找不到其他文字性質(zhì)的導(dǎo)航鏈接，就會(huì)兩眼一抹黑，什么都看不到，那就別提能夠進(jìn)入你的網(wǎng)站了。

  （2）JS導(dǎo)航鏈接。

  有時(shí)候弄一些JS的來做鏈接，蜘蛛是沒有辦法抓取到的。

  （3）框架結(jié)構(gòu)。

  蜘蛛并不喜歡框架的結(jié)構(gòu)，所以我們?cè)谧龅臅r(shí)候盡量避免這樣的頁面結(jié)構(gòu)。

  （4）長(zhǎng)的動(dòng)態(tài)URL。

  雖然蜘蛛并不討厭動(dòng)態(tài)URL，但是如果連接過長(zhǎng)，參數(shù)過多，那肯定是不利于蜘蛛爬行和索引的。

  （5）強(qiáng)制登錄。

  強(qiáng)制用戶登錄并不是一個(gè)好的辦法。蜘蛛可沒有跟人一樣的去登陸。這里特別要說某些論壇，讓優(yōu)質(zhì)內(nèi)容隱藏，用戶必須登錄才能看到，這樣蜘蛛看不到這些內(nèi)容，可能就不喜歡這個(gè)網(wǎng)站了。

  （6）各種不友好的跳轉(zhuǎn)。

  有時(shí)候網(wǎng)站各種原因?qū)е鲁霈F(xiàn)跳轉(zhuǎn)，這些跳轉(zhuǎn)可能會(huì)造成搜索引擎認(rèn)為網(wǎng)站在作弊。這些跳轉(zhuǎn)有的會(huì)給蜘蛛爬行帶來困難。一定要避免。

  二、怎么防范避免蜘蛛陷阱

  （1）找專業(yè)的建站公司做網(wǎng)站。

  有一些不懂SEO的建站公司，做出來的網(wǎng)站對(duì)搜索引擎一點(diǎn)都不友好，這樣不行。盡量選擇專業(yè)的SEO團(tuán)隊(duì)來建網(wǎng)站，這樣對(duì)網(wǎng)站絕對(duì)會(huì)好很多。

  （2）網(wǎng)站做好最好請(qǐng)專業(yè)SEO人員把把關(guān)。

  有些時(shí)候網(wǎng)站已經(jīng)做好了，那就找SEO人員看看，能修正的修正，不能修正的舍棄這個(gè)網(wǎng)站。網(wǎng)站優(yōu)化不管是自己做還是找專業(yè)公司來做，一個(gè)好網(wǎng)站都是必不可少的。

  （3）減少flash、js等的使用。

  一般現(xiàn)在的網(wǎng)站其他情況造成的蜘蛛陷阱比較少，主要是falsh和js的運(yùn)用是比較常見的。這樣的情況盡量的避免，能不用就不用。