從事
企業網站SEO優化人員都知道，搜索引擎喜歡的網站結構是樹狀結構。樹狀結構符合人們對知識的歸類習慣。
搜索引擎的數據庫可以類比爲一個超級圖書館，每個網站相當於這個超級圖書館某閱覽室裏的一個小書架。 搜索引擎希望每個書架上的“書”——知識、 信息，都有序地擺放，以方便用戶查閱。但其實搜索引擎數據庫在本質上就是一個大圖書館，他們每天在做的工作和圖書館管理員的工作有很多類似的地方。只是搜索引擎把工作重點放在：把讀者可能會喜歡的書，放在顯眼的位置。
有些
企業網站設計技術對搜索引擎來說很不友好，不利於蜘蛛爬行和抓取，這些技術被稱爲蜘蛛陷阱，常見的蜘蛛陷阱包括如下這些。
1.flash
在網頁的某一小部分使用Flash增強視覺效果是很正常的，比如一些廣告圖片等。這些小部分的對搜索引擎抓取和收錄沒有影響，但是有的
企業網站整個首頁就是一個大的Flash文件，這就不利於搜索引擎友好性，這就構成了蜘蛛陷阱。
整個網站就是一個大Flash文件，從
企業網站SEO優化角度來說。是萬萬不可的。如果爲了效果必須要添加，至少也需要在首頁加上一個通往HTML版本的鏈接，搜索引擎跟蹤這個鏈接可以抓取後面的HTML版本頁面。
2.各種跳轉
現在搜索引擎對其他形式的跳轉都比較敏感，如302跳轉、Flash跳轉、JavaScript跳轉、Meta Refresh跳轉。
有些
企業網站用戶訪問首頁時會被自動轉向到某個目錄的頁面，這樣的轉向看不出任何理由和目的，都對蜘蛛爬行不利。所以除非萬不得已，儘量不要使用301轉向以外的跳轉。
3.框架結構
使用框架結構設計頁面，在
企業網站初期曾經流行，不過現在的網站已經很少使用框架了，不利於搜索引擎抓取。訪問一個使用了框架的網站。它只能包含其他HTML文件的代碼，並不包含任何文字信息，搜索引擎根本無法判斷這個網站是什麼內容 。所以不要使用框架結構
4.動態URL
一般來說動態URL不利於搜索引擎蜘蛛爬行，應該儘量避免。
5.要求登錄
有些
企業網站內容放在需要用戶登錄之後才能看到的會員區域，這部分內容搜索引擎無法看到。蜘蛛不能填寫用戶名、密碼，也不會註冊。
6.強制使用cookies
有些
企業網站爲了實現某種功能，如記住用戶登錄信息、跟蹤用戶訪問路徑等，強制用戶使用cookies,用戶瀏覽器如果不使用，頁面顯示不正常。搜索引擎蜘蛛就相當於一個禁用了cookies的瀏覽器，如果強制使用，就只能造成搜索引擎蜘蛛無法正常訪問。
