做網(wǎng)站優(yōu)化的人都是知道：搜索引擎的蜘蛛，由于帶寬資源、時(shí)間等因素，不可能爬完所有頁面，實(shí)際上最大的搜索引擎也只是爬行和收錄了互聯(lián)網(wǎng)的一小部分。由此可見，雖然理論上蜘蛛能爬行和抓取網(wǎng)站所有頁面，但是實(shí)際上不能、也不會(huì)這么做的。

    所有網(wǎng)站站長都想要搜索引擎收錄盡可能多的頁面，那么就要想方設(shè)法吸引蜘蛛來抓取。既然不能抓取所有頁面，蜘蛛所要做的就是盡量抓取重要頁面。這就不言而喻了，作為站長面對蜘蛛所要做的就是要引導(dǎo)蜘蛛去抓取自己網(wǎng)站上比較重要的頁面和信息，那么哪些頁面才能被蜘蛛認(rèn)為比較重要呢?

    1、網(wǎng)站及頁面權(quán)重。

    我們都知道質(zhì)量高、資格老的網(wǎng)站會(huì)被認(rèn)為權(quán)重比較高，像這種網(wǎng)站上的頁面被蜘蛛爬行的深度也會(huì)比較高，所以自然的會(huì)有更多內(nèi)頁被收錄。

    2、網(wǎng)站內(nèi)容更新度。

    網(wǎng)站的內(nèi)容更新很重要，而更新頻率的把握也很重要，所以各位站長或網(wǎng)站編輯人員需注意，制定一個(gè)定期更新網(wǎng)站計(jì)劃是很有必要的。

    3、網(wǎng)站鏈接。

    無論是外部鏈接，還是網(wǎng)站的內(nèi)部鏈接，要被蜘蛛抓取，就必須有導(dǎo)入鏈接進(jìn)入頁面，否則蜘蛛根本沒有機(jī)會(huì)知道頁面的存在。這要從我們網(wǎng)站的布局設(shè)計(jì)開始，加強(qiáng)和優(yōu)化網(wǎng)站的內(nèi)部鏈接。

    4、從首頁容易進(jìn)入。

    網(wǎng)站上權(quán)重最高的是首頁，大部分外部鏈接是指向首頁的，蜘蛛訪問最頻繁地也是首頁。離首頁點(diǎn)擊距離越近，頁面權(quán)重越高，被蜘蛛爬行的機(jī)會(huì)也越大，所以我們可以把自己網(wǎng)站上重要的頁面以及信息在建站的同時(shí)放到距離首頁較近的位置，這樣蜘蛛能夠很快的爬行與抓取這些頁面。