每個網站都有一些在功能及用戶體驗方面很必要，但在seo角度沒必要的頁面，用戶登錄頁面，用戶注冊頁面，從用戶角度看，這些頁面是必須的功能或有助于提高網站的信任度，不過搜索引擎既不能填表注冊，也不能登錄，一般網站也不會想優化隱私權政策這種關鍵詞，這些頁面既沒有必要也不太可能獲得任何排名。
第一、網站的更新頻率。
蜘蛛每次爬行都會把頁面數據存儲起來。如果第二次爬行發現頁面與第一次收錄的完全一樣，說明頁面沒有更新，蜘蛛也就沒有必要經常抓取了。頁面內容經常更新，蜘蛛就會更加頻繁的訪問頁面，但是蜘蛛不是你一個人的，不可能就在這蹲著等你更新，所以我們要主動向蜘蛛示好，有規律的進行文章更新，這樣蜘蛛就會根據你的規律有效的過來抓取，不僅讓你的更新文章能更快的抓取到，而且也不會造成蜘蛛經常性的白跑一趟。
第二、網站及頁面權重。
這個肯定是首要的了，權重高、資格老、有權威的網站蜘蛛是肯定特殊對待的，這樣的網站抓取的頻率非常高，而且大家知道搜索引擎蜘蛛為了保證高效，對于網站不是所有頁面都會抓取的，而網站權重越高被爬行的深度也會比較高，相應能被抓取的頁面也會變多，這樣能被收錄的頁面也會變多。
第三、網站服務器。
網站服務器是網站的基石，網站服務器如果長時間打不開，那么這相當與你閉門謝客，蜘蛛想來也來不了。百度蜘蛛也是網站的一個訪客，如果你服務器不穩定或是比較卡，蜘蛛每次來抓取都比較艱難，并且有的時候一個頁面只能抓取到一部分，這樣久而久之，百度蜘蛛的體驗越來越差，對你網站的評分也會越來越低，自然會影響對你網站的抓取，所以選擇空間服務器一定要舍得，沒有一個好的地基，再好的房子也會跨。
第四、網站程序。
在網站程序之中，有很多程序可以制造出大量的重復頁面，這個頁面一般都是通過參數來實現的，當一個頁面對應了很多url的時候，就會造成網站內容重復，可能造成網站被降權，這樣就會嚴重影響到蜘蛛的抓取，所以程序上一定要保證一個頁面只有一個url，如果已經產生，盡量通過301重定向、canonical標簽或者robots進行處理，保證只有一個標準url被蜘蛛抓取。
第五、文章的原創性。
優質的原創內容對于百度蜘蛛的誘惑力是非常巨大的，蜘蛛存在的目的就是尋找新東西，所以網站更新的文章不要采集、也不要每天都是轉載，我們需要給蜘蛛真正有價值的原創內容，蜘蛛能得到喜歡的，自然會對你的網站產生好感，經常性的過來覓食。
第六、扁平化網站結構。
蜘蛛抓取也是有自己的線路的，在之前你就給他鋪好路，網站結構不要過于復雜，鏈接層次不要太深，如果鏈接層次太深，后面的頁面很難被蜘蛛抓取到。
很多網站優化團隊都會有外鏈建設專員，seo基礎優化培訓企業也會有相關的外推專員。只要我們在seo方案中量化這些外鏈建設的數量，外推人員的方向，然后結合一系列的績效考核就能夠很好的達到外鏈的效果。




建網站有幾種類別？
深圳網站優化：四個關鍵詞排名降低的原因，外鏈僅僅是一項！
網站建設需要注意的幾點
一個標準海外數據中心成本有哪些
網站建設中如何實現推廣多個網站關鍵詞？
網站建設還有用嗎？
網絡營銷也是學校降低運營成本的方法
網站優化可以修改的幾個欄目