在互聯網時代，網站建設已經成為大勢所趨，也可以說網站建設是目前階段大家都非常熟悉的東西，伴隨著互聯網發展的越來越先進，也有越來越多的企業開始進行網站建設。實際上網站建設僅僅是一個非常基礎性的工作，很多企業進行網站建設的目的是為了后期的運營，并且運營中網站優化也是一項非常關鍵性的工作。因此要能夠實現良好的優化目的，并且可以在網站建設之后獲得可觀的網站流量，因此在網站建設的時候我們就要從搜索引擎蜘蛛的角度去看待一個網站的頁面結構，在抓取，索引和排名的時候會遇到哪些問題呢？解決了這些問題的網站設計就是搜索引擎友好的。

　　第一點：搜索引擎蜘蛛能不能找到你的網頁?

　　要讓搜索引擎找到你的主頁你就必須要有外部鏈接，在找到你的主頁之后，還必須能找到你的更深的內容頁，也就要求你要有良好的網站結構，符合邏輯，可能是一個扁平的，可能是一個樹狀的。

　　而且這些網頁之間要有良好的鏈接結構，這些鏈接以文字鏈接最好，圖像鏈接也可以，但是JavaScript鏈接，下拉菜單鏈接，flash鏈接等就會有問題。http://m.krq623.cn

　　一般推薦網站需要有一個網站地圖，把所有重要的部分和網頁都列進去。如果網站比較大，網站地圖還可以分成幾個。

　　網站的所有頁面都要能從主頁開始，順著鏈接找到，最好在3，4次點擊之內。

　　第二點：搜索引擎蜘蛛找到網頁后能不能抓取網頁?

　　網頁的URL必須是可以被抓取的，如果網頁是由數據庫動態生成的，那么URL一般要經過改寫成靜態的，也就是去掉那些URL中問號參數之類的東西，也要去掉Session ID。技術上倒不是搜索引擎不能讀取這種URL，但是為了避免陷入無限循環，搜索引擎蜘蛛通常要遠離這類URL。

　　還有如果你的網站是一個整個的flash，那也沒辦法讀取。雖然搜索引擎在努力想讀取flash信息，但目前為止收效甚微。

　　還有框架結構(frame)，在網站剛出現的時候，框架結構風行一時，現在還有不少網站在用，這是搜索引擎蜘蛛的大敵。

　　還有盡量去除不必要的搜索引擎不能讀的東西，像音頻文件，圖片，彈出窗口等。

　　第三點：抓取網頁之后，怎么提取有用的信息呢?

　　HTML代碼要盡量精簡、關鍵詞在整個網站的合理布局、一些重要標簽的撰寫、起碼的兼容性等可以幫助搜索引擎理解網站的頁面內容，提取相對有用的信息。把CSS，JavaScript等放在外部文件。

　　檢查網頁對不同操作系統，不同browser的兼容性。檢查是否符合W3C標準。

　　只有搜索引擎能順利找到你的所有網頁，抓取這些網頁并取出其中真正的有相關性的內容，這個網站才可以被視為是搜索引擎友好的。