有一些網(wǎng)站設(shè)計(jì)做的對(duì)于搜索引擎來說很不友好，就導(dǎo)致了不利于蜘蛛的爬行和抓取，其實(shí)這樣就構(gòu)成了一個(gè)蜘蛛陷阱。官方說法，“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物，通常是那些顯示網(wǎng)頁的技術(shù)方法，目前很多瀏覽器在設(shè)計(jì)的時(shí)候考慮過這些因素，所以可能網(wǎng)頁界面看起來非常正常，但這些蜘蛛陷阱會(huì)對(duì)蜘蛛程序造成障礙，如果消除這些蜘蛛陷阱，可以使蜘蛛程序收錄更多的網(wǎng)頁。SEO工作中，網(wǎng)頁被收錄是基礎(chǔ)工作，但對(duì)于搜索引擎來講，極少情況會(huì)100%收錄你網(wǎng)站的所有網(wǎng)頁，搜索引擎的爬蟲程序設(shè)計(jì)的再精巧，也難以逾越所謂的蜘蛛陷阱。

　　搜索引擎蜘蛛陷阱有著怎樣的危害呢?

　　搜索引擎蜘蛛陷阱導(dǎo)致了不利于蜘蛛的爬行和抓取，從而導(dǎo)致網(wǎng)站收錄情況不佳，最終影響網(wǎng)站關(guān)鍵詞排名。

　　搜索引擎蜘蛛陷阱的主要類別

　　1、登錄要求

　　有些企業(yè)站和個(gè)人站的設(shè)置一定要注冊(cè)登錄后才能看到相關(guān)的文章內(nèi)容，這種對(duì)蜘蛛不是很友好，蜘蛛不會(huì)注冊(cè)、也不會(huì)登錄。

　　2、動(dòng)態(tài)URL

　　什么叫動(dòng)態(tài)URL、什么叫靜態(tài)URL，簡(jiǎn)單的說就是帶有問號(hào)、等號(hào)及參數(shù)的網(wǎng)址就是動(dòng)態(tài)URL，動(dòng)態(tài)URL不利于搜索引擎蜘蛛的爬行和抓取。

　　3、強(qiáng)制用Cookies

　　部分站長(zhǎng)為了讓用戶記住登陸信息，強(qiáng)迫用戶使用Cookies如果未開啟，則無法進(jìn)行訪問，訪問頁面顯示的也不會(huì)正常，這種方式會(huì)讓蜘蛛無法進(jìn)行訪問。

　　4、框架結(jié)構(gòu)

　　首先各位站長(zhǎng)你知道什么叫框架結(jié)構(gòu)的世界嗎?如果你不知道恭喜你，這個(gè)蜘蛛陷阱你已經(jīng)躲避了，也不要去了解，所以有關(guān)框架結(jié)構(gòu)的設(shè)計(jì)不做任何的介紹。雖然說框架結(jié)構(gòu)對(duì)網(wǎng)站的維護(hù)和更新有一定的方便性。但是，它不利于搜索引擎蜘蛛抓取。這也就是現(xiàn)在框架結(jié)構(gòu)不流行的因素之一。

　　5、各種跳轉(zhuǎn)

　　對(duì)搜素引擎來說只對(duì)301跳轉(zhuǎn)相對(duì)來說比較友好，對(duì)其他形式的跳轉(zhuǎn)都是比較敏感，例如：JavaScrit跳轉(zhuǎn)、MetaRefresh跳轉(zhuǎn)、Flash跳轉(zhuǎn)、302跳轉(zhuǎn)。

　　有些網(wǎng)站的做法很讓人無奈，當(dāng)你打開網(wǎng)頁后會(huì)自動(dòng)轉(zhuǎn)向其他頁面，就算打開的頁面和你要找的頁面主體先關(guān)也算過得去。但是很大部分的網(wǎng)站轉(zhuǎn)向讓你無任何理由和目的這種轉(zhuǎn)向不推薦大家使用，如果你非要做轉(zhuǎn)向，只推薦用301永久跳轉(zhuǎn)，可以將權(quán)重進(jìn)行傳遞，除了此轉(zhuǎn)向其他都不推薦，因?yàn)楹芏嗟恼加闷渌D(zhuǎn)向欺騙用戶和搜索引擎，也是heimao的一種手段，所以建議大家不要使用，以免網(wǎng)站被K。

　　6、Flash

　　有的網(wǎng)站頁面使用Flash視覺效果是很正常的，比如用Flash做的Logo、廣告、圖表等，這些對(duì)搜索引擎抓取和收錄是沒有問題的，很多網(wǎng)站的首頁是一個(gè)大的Flash文件，這種就叫蜘蛛陷阱，在蜘蛛抓取時(shí)HTML代碼中只是一個(gè)鏈接，并沒有文字，雖然大的Flash效果看上去很好，外觀看著也很漂亮，但可惜搜素引擎看不到，無法讀取任何內(nèi)容所以為了能體現(xiàn)網(wǎng)站優(yōu)化的最好效果，不提倡這種Flash做首頁圖片。

　　7、Javascript鏈接

　　因?yàn)镴S有很多吸引人們眼球的驚人的各種效果，很多站長(zhǎng)呢，就用Javascript腳本做一些導(dǎo)航。其實(shí)，Javascript同樣也是比較嚴(yán)重的蜘蛛陷阱之一。

　　當(dāng)然，有的搜索引擎是可以獲得Javascript上的鏈接，甚至可以執(zhí)行腳本并跟蹤鏈接。但對(duì)于一些權(quán)重比較低的網(wǎng)站來說，還是大可不必浪費(fèi)時(shí)間，不如多更新一些高質(zhì)量的文章，多做幾個(gè)外鏈。

　　8、Session ID

　　如果我們的網(wǎng)站使用Session ID跟蹤用戶訪問，這樣就會(huì)出現(xiàn)一種現(xiàn)象，搜索引擎每一次訪問我們的頁面時(shí)出現(xiàn)一個(gè)不一樣的Session ID，即使訪問的是同一個(gè)頁面，它也會(huì)出現(xiàn)不一樣的ID，但是內(nèi)容卻是一樣的，就形成了大量的重復(fù)性內(nèi)容，這也就形成了一個(gè)蜘蛛陷阱，也不利于網(wǎng)站的優(yōu)化。那么我們建議大家使用cookies而不要生成Session ID。