目前大部分網站都是開源程序建站，博客站點有WP，z-blog，商業站點有dede，shopex，論壇有discuz，php，在蜘蛛爬行方面 已經有很大進步，利于seo優化和蜘蛛爬行。但是很多站長在建站之初并沒有做好欄目和版面的規劃，路徑太長太深，首頁的具體不止三次點擊，爬蟲不會爬那么深。不斷的增加刪除頁面，造成網站大量的404，降低蜘蛛的爬行興趣，同樣會影響網站的權重。

加上后期的修改代碼，調整插件，插件調整會好點，就算出錯也可以及時回復，只要不是刪除。但是代碼不一樣，如果你修改header部分的次數過多， 幅度過大，都會被搜索引擎認為是一個新站，會造成之前已經收錄頁面遭到刪除，爬蟲的數量和次數也會大大降低。更換主題模板也是一樣，盡量一次敲定，后期的 每一次修改都會造成不必要的權重損失。

也有部分網站是設計師設計的，這類網站一般都會經過多次調試無誤，才會發布上線，這并不意味著沒有問題。外觀上漂亮的flash，iframe頁面，卻沒有任何實用價值，蜘蛛幾乎從不爬行，所以收錄只能是0。上次聽國平老師講課，印度一個排名前三的購物網站，就是因為網站的代碼問題，導致30000人注冊，只有不到1%的成功率，而他們在沒招聘seo之前，根本不知道這個事情。這就需要設計師在網站上線之后，還要協同seo做好追蹤調試， 鏈接問題，死循環，蜘蛛陷阱等問題的及時改進。