搜索引擎如何抓取你的網(wǎng)頁

搜索引擎優(yōu)化（SEO）是搜索引擎有好的收錄網(wǎng)頁的過程，適當(dāng)?shù)腟EO有利于蜘蛛爬行你的網(wǎng)站，使你的內(nèi)容符合搜索引擎算法，以便確認(rèn)它與關(guān)鍵詞高度相關(guān)。

優(yōu)化的目的就是使網(wǎng)頁的內(nèi)容便于蜘蛛理解，下面我就以百度新收錄的一篇內(nèi)容來進(jìn)行說明，我以一個(gè)完整標(biāo)題進(jìn)行搜索，其目的是能反映出更多關(guān)鍵詞在百度自然搜索的結(jié)果頁面，能更好的說明搜索引擎是如何抓取你的網(wǎng)頁的。

SEOer通常關(guān)注的是網(wǎng)頁主體部分的自然搜索結(jié)果，百度和Google搜索結(jié)果頁面大致相同，搜索結(jié)果頁面通常為頂部、右側(cè)、尾部均為廣告鏈接，熱門關(guān)鍵詞會(huì)有廣告，而我用這么長的詞語就屬于冷門詞語，沒有廣告。

頁面標(biāo)題很重要

如圖一所示，搜索引擎通常抓取的頁面標(biāo)題是HTML代碼中的標(biāo)題Title部分，所以說頁面標(biāo)題是寫法對(duì)搜索引擎排名有重要的意義，通常頁面標(biāo)題Title的優(yōu)化格式為：文章標(biāo)題——欄目標(biāo)題——網(wǎng)站標(biāo)題。

它不一定只展示description

而第二行的描述部分通常會(huì)截取description部分，但更多時(shí)候會(huì)抓取正文的前200字，如果你要說具體顯示description還是截取正文，是和用戶搜索的關(guān)鍵詞有關(guān)。比如圖一中，百度截取了<h1>中的關(guān)鍵詞，因?yàn)楸R松松博客的中有“互聯(lián)網(wǎng)”這個(gè)關(guān)鍵詞。下圖能直觀的反應(yīng)出這些問題。

把圖一和圖二結(jié)合起來看，我們就能清楚的分辨出，百度到底展示了網(wǎng)頁的哪些部分，title、<h1>、截取正文和內(nèi)容部分的關(guān)鍵詞。;

用戶搜索的關(guān)鍵詞在搜索結(jié)果中都用紅色高亮顯示，用戶可以非常迅速地看到該網(wǎng)頁是否是自己想要的，通常百度和Google的搜索結(jié)果類似，我在這里就不多說了。

關(guān)鍵詞的密度與分布

通過上面兩張圖，可以看出我搜索的有兩大關(guān)鍵詞“互聯(lián)網(wǎng)”和“香港人”，通過圖二我們可以看出，這兩個(gè)關(guān)鍵詞在我列出的6大部分中都有顯示，它們均勻的分布在內(nèi)容的各個(gè)部分，尤其是標(biāo)題和title部分。當(dāng)然由于我搜索關(guān)鍵詞的問題，把整個(gè)標(biāo)題都搜了一遍，所以分布的比較均勻。

我想，通過以上簡單分析，大家應(yīng)該能大致了解搜索引擎抓取你網(wǎng)頁的什么部分了吧？？如果你還沒了解，那.......呃...親，再看一遍吧！