在我們優(yōu)化的過程當中，有一些網(wǎng)站設(shè)計技術(shù)對搜索引擎來說是很不討喜歡的。因為這些都不利于搜索引擎蜘蛛的爬行與抓取。下面給大家簡單的介紹幾種常見的蜘蛛陷阱，希望能幫助些新手SEOer，寫的不好，還要請大家多多支持!
首先搜索引擎更常見的一種陷阱是Flash。在網(wǎng)頁的某一小部分使用Flash增強視覺效果是和很正常的，比如用Flash做成廣告，圖標等。這樣的Flash對搜索引擎的爬行與抓取是沒有什么影響的。但是，萬萬不可在首頁使用一個大大的Flash文件，因為這樣就形成一個蜘蛛陷阱。當搜索引擎抓取的HTML代碼只有一個連向Flash文件的連接，沒有其他的文字內(nèi)容。如果Flash效果是必須滴，那也要在首頁加上一個通往HTML版本的鏈接。這個鏈接要在Flash文件之外的HTML代碼中，搜索引擎跟蹤這個鏈接可以抓取后面的HTML版本頁面。
再一個常見的蜘蛛陷阱就是Session ID(會話ID)。有些網(wǎng)站使用Session ID跟蹤用戶反問，每個用戶訪問網(wǎng)站時都會生成前幾特**的Session ID，加在URL中。搜索引擎蜘蛛的每一次訪問也會被當成一個新的用戶，URL中會加上一個不同的Session ID，這樣搜索引擎蜘蛛每次來訪問時所得到的同一個頁面的URL將不一樣，后面帶著一個不一樣的Session ID也是一個蜘蛛陷阱。
各種跳轉(zhuǎn)也是蜘蛛陷阱之一，除了301轉(zhuǎn)向以外，搜索引擎對其他形式的跳轉(zhuǎn)都比較敏感，如：302跳轉(zhuǎn)，JavaScript跳轉(zhuǎn)，F(xiàn)lash跳轉(zhuǎn)，Meta Refresh跳轉(zhuǎn)。有些網(wǎng)站用戶訪問首頁時會被自動轉(zhuǎn)向到某個目錄下的頁面。但大部分這種首頁轉(zhuǎn)向看不出任何理由和目的，像這樣的轉(zhuǎn)向應(yīng)能勉則勉，不到萬不得已，盡量不要使用301轉(zhuǎn)向以外的跳轉(zhuǎn)。
框架結(jié)構(gòu)也可以算是一種蜘蛛陷阱，如果你還在使用框架結(jié)構(gòu)的設(shè)計，本人菜鳥SEO2014 在這里建議大家立馬停止。不要浪費時間如研究怎么讓搜索引擎去收錄框架結(jié)構(gòu)網(wǎng)站。因為搜索引擎無法判斷框架中的頁面內(nèi)容應(yīng)屬于主框架還是框架調(diào)用的文件。
動態(tài)URL不利于搜索引擎蜘蛛爬行，應(yīng)該盡量避免。
JavaScript鏈接可以創(chuàng)造出很多好的視覺效果，但是，這也是一種蜘蛛陷阱。在這里，菜鳥SEO2014 告訴大家，用CSS做導航系統(tǒng)一樣能創(chuàng)造出好的視覺效果，所以，大家可以用CSS來代替JavaScript，可能會事半功倍哦!
有些網(wǎng)站內(nèi)容必須用戶登陸之后才能看到，我們可以試著猜想一下，如果是搜索引擎想要抓取該頁面內(nèi)容呢，難道也要先登陸嗎，要清楚，搜索引擎是不會填寫登陸資料和注冊會員的。所以，我們也要避免這種蜘蛛陷阱的產(chǎn)生
更后給大家介紹一種非常值得大家注意的蜘蛛陷阱，那就是當一個網(wǎng)站為了實現(xiàn)某種功能，如記住用戶登陸信息，跟蹤用戶訪問路徑等，強制用戶使用Cookies,如果用戶的瀏覽器沒有啟用Cookies，頁面的顯示就會不正常。這個問題直接就指向了搜索引擎，因為搜索引擎蜘蛛就相當于一個禁用Cookies的瀏覽器，如果強制搜索引擎蜘蛛使用Cookies的話就會造成無法正常訪問。
溫馨提示:這些蜘蛛陷阱菜鳥SEO2014 在這里嚴重提醒大家在做SEO的時候要格外注意，不要讓搜索引擎蜘蛛掉進了自己設(shè)置的陷阱之中。我們不能把希望寄托在搜索引擎身上，指望它能自己克服困難，我們能做的是要讓搜索引擎的爬行與抓取工作盡量簡單容易，大家可千萬不要鉆牛角尖哦!)
