搜索引擎為了抓取盡可能多的頁面，它會自動跟蹤頁面的鏈接，通常采用廣度優(yōu)先、深度優(yōu)先這兩種遍歷方法。理論上說，無論是采用深度還是廣度策略，只要給蜘蛛足夠的時間，都能抓取到網(wǎng)站頁面內(nèi)容，但是實際情況是，搜索引擎蜘蛛的寬帶資源、服務(wù)器資源等等，都是有限的，因此從實際情況來看，蜘蛛也只能是抓取到互聯(lián)網(wǎng)頁面內(nèi)容的一小部分，還有很大部分的頁面，蜘蛛抓取不到。

　　高權(quán)重、內(nèi)容更新快且質(zhì)量高，資格老的這些網(wǎng)站，會被全網(wǎng)網(wǎng)站排名優(yōu)化搜索引擎認為是首先要考慮抓取的網(wǎng)站，這類網(wǎng)站通常由于優(yōu)先被搜索引擎蜘蛛爬行，因此無論首頁、內(nèi)頁都會被大量收錄，且收錄快照更新快。

　　哪么全網(wǎng)網(wǎng)站排名優(yōu)化在這種網(wǎng)站之間激烈競爭的態(tài)勢下，如何通過吸引蜘蛛來提高網(wǎng)站的收錄呢?SEO學(xué)堂認為，要想自己的網(wǎng)站能夠被蜘蛛盡量多抓取，就要想方設(shè)法吸引蜘蛛來到您的網(wǎng)站來抓取。既然搜索引擎蜘蛛不能抓取所有頁面，哪么它就會抓取一些重要的頁面。具體哪些會被蜘蛛認為是重要的頁面呢?有以下幾點影響因素：

　　首頁鏈接的權(quán)重相對較大。蜘蛛普遍認為，網(wǎng)站的首頁是權(quán)重大的，因此距離網(wǎng)站首頁越近的鏈接，同樣的頁面的權(quán)重也越高，被蜘蛛爬行收錄的幾率也越大。

　　學(xué)習(xí)SEO的目的是為了運用SEO，從蜘蛛的爬行原理分析，新站要想被蜘蛛快速收錄，就應(yīng)該提高網(wǎng)站的更新頻率，多為用戶提供高質(zhì)量的文章，同時要廣泛的發(fā)展外鏈與做好站內(nèi)鏈接優(yōu)化工作，這樣蜘蛛自然就會快速建立起對您站點的信任，從而提高您的站點收錄效率，進一步提升網(wǎng)站的SEO關(guān)鍵詞排名的目的。

　　更新效率快的網(wǎng)站。蜘蛛一旦把您的站點放入收錄數(shù)據(jù)庫中，且被蜘蛛所信任后，它就會經(jīng)常來到這類站點，來查看是否有新更新內(nèi)容，如果有頁面更新內(nèi)容，頁面出現(xiàn)很多新的鏈接，哪么蜘蛛收錄更新的速度也會相應(yīng)提高，反之則大大降低收錄快照更新效率。

　　導(dǎo)入鏈接多且廣泛。外鏈、內(nèi)鏈，要被蜘蛛抓取，就有導(dǎo)入鏈接進入頁面，否則蜘蛛根本沒有機會知道頁面的存在。導(dǎo)入鏈接多且廣泛的站點，通常被蜘蛛爬行的深度也相應(yīng)增加。