有的朋友會問，為什么Flash是蜘蛛陷阱的一種，其實這個問題很簡單，就是因為蜘蛛識別不了Flash，很多網站喜歡在首頁做一個Flash動畫然后再跳向HTML頁面，用戶可以訪問網站看完片頭后被轉向得真正的HTML網頁。但搜索引擎蜘蛛呢蜘蛛是不能通過這個Flash跟蹤到HTML版本頁面的。
1這就是一個陷阱
阻擋了蜘蛛繼續(xù)抓取網站。如果Flash效果是必需的，木木seo建議在首頁Flash文件之外加上一個通往HTML版本的鏈接，這樣蜘蛛可以跟蹤這個鏈接抓取后面得HTML頁面。

2. JS鏈接

Javascript可以創(chuàng)造出很多吸引人得視覺效果，有些網站喜歡使用Javascript腳本生成導航系統(tǒng)。這也是比較嚴重得蜘蛛陷阱之一。蜘蛛對于js也是識別不了的，對于js特效可以加入網站，也可以將不需要被抓取的鏈接放入js，但是需要進行爬行抓取的鏈接一定不能放入JS，這會造成蜘蛛不能繼續(xù)爬行，同時js也不要太多，可以專門建一個js文件。

3. 動態(tài)URL

我們說現(xiàn)在蜘蛛是可以抓取部分URL鏈接的，但是動態(tài)URL是數據庫直接生成的，有的帶了問號、等號等多個參數。這類網址不僅不利于搜索引擎蜘蛛爬行，而且還可能造成蜘蛛的死循環(huán)，這是一個致命的蜘蛛陷阱。所以大多數情況都是建議大家網址靜態(tài)化。
4. Session ID

有些網站為了跟蹤用戶訪問使用Session ID，每個用戶訪問網站時都會生成獨特唯一得SessionID，也即ID。這個ID都是加在URL中，搜索引擎蜘蛛的每一次訪問也會被當成一個新得用戶在URL中會加上一個不同的ID,這樣蜘蛛每次來訪問時所得到的同一個頁面會是一個不一樣的URL。結果就很明顯，這樣一來會產生復制內容頁面，造成了高度重復的內容頁。

5. Frame框架

框架結構對蜘蛛來說和Flash、js一樣都是一道墻，框架結構也會阻礙搜索引擎蜘蛛的爬行和抓取，讓蜘蛛掉進陷阱。

6. 要求登錄

這個是很常見的，有些網站內容放在需要用戶登錄之后才能看到得到，設置有的整個網站只能登陸進入后才能看，這對于用戶當然沒什么，而對于蜘蛛就造成陷阱，為什么因為蜘蛛不能填寫用戶名、密碼、也不會注冊，自然而然，蜘蛛不能進來抓取你的內容，所以除非是VIP內容或者是不需要蜘蛛抓取的內容，其它的應該對蜘蛛公開，這樣才能抓取。

7. 強制使用Cookies

有些網站為了實現(xiàn)某種功能、如記住用戶登錄信息、跟蹤用戶訪問路徑等、強制用戶使用Cookies、用戶瀏覽器如果沒有啟用Cookies、頁面顯示不正常。搜索引擎蜘蛛就相當于一個禁用Cookies得瀏覽器、強制使用Cookies只能造成搜索引擎蜘蛛無法正常訪問

8.各種跳轉

目前比較建議的網站跳轉就是301、302重定向，而其它跳轉，蜘蛛是非常的敏感。因為黑帽最喜歡用跳轉這種手段了，黑了別人的網站，然后在別人的網站上掛上一個指向自己網站的跳轉。像js跳轉、代碼跳轉等都不建議大家隨便用，特別是如果在做404頁面一定要用代碼跳轉，那建議時間在5秒以上。

9.網站鏈接結構

對于蜘蛛而言，我們主要說的就是網站的鏈接結構，其實網站的鏈接結構就等于一個房子，鏈接就是門，而蜘蛛就是我們邀請而來的朋友，網站鏈接結構槽糕混亂就相當于朋友來到你家后根本就分不清楚東南西北，找不到入口出口。連對應的鏈接都找不到，蜘蛛怎么進行抓爬所以鏈接結構還是需要呈扁平樹狀結構。

分享題目：網站優(yōu)化：SEO從業(yè)者不得不知的蜘蛛陷阱
網頁鏈接：http://jinyejixie.com/news/129270.html

成都網站建設公司_創(chuàng)新互聯(lián)，為您提供服務器托管、響應式網站、標簽優(yōu)化、定制網站、網站營銷、網站建設

廣告

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)