我經(jīng)常會(huì)遇到一些不知道 搜索引擎如何收集信息的人。他們知道什么是搜索引擎，而且也理解得到搜索引擎索引的重要性，盡管有些人知道一些，但當(dāng)你開(kāi)始談?wù)撝T如爬行程序之類的內(nèi)容時(shí)，他們就開(kāi)始卡殼了。　不要再出現(xiàn)卡殼這樣的尷尬場(chǎng)面了。本文旨在幫你揭示一些你對(duì)搜索引擎還不是很肯定的東西。畢竟，如果你想通過(guò)得到搜索引擎的收錄而受益，你還是了解一下搜索引擎如何工作為好。 [URL=http://hxc888.cn]GOOGLE排名專家[/URL] 　　合三為一 　　基于爬行程序的搜索引擎是由三部分組成的：爬行程序、索引和軟件。每一部分都具有自己的功能并且三個(gè)部分一起產(chǎn)生了我們?cè)谒阉饕娼Y(jié)果頁(yè)面（SERPs）上所看到的內(nèi)容。饑餓的爬行程序 　　另一個(gè)廣為人知的名字是網(wǎng)絡(luò)爬行程序或者機(jī)器人，搜索引擎爬行程序就是能閱讀網(wǎng)頁(yè)和跟蹤站點(diǎn)內(nèi)到其它網(wǎng)頁(yè)任何鏈接的一個(gè)自動(dòng)程序。我們經(jīng)常將一個(gè)稱為被“爬行”或“索引”。在網(wǎng)絡(luò)上有三種非常饑餓、非?；钴S的爬行程序。它們的名字為Googlebot（Google）、Slurp（ Yahoo?。┖蚆SNBot（MSN 搜索）。 　　爬行程序會(huì)從先前添加到它們索引（數(shù)據(jù)庫(kù)）中的系列網(wǎng)頁(yè)URLs開(kāi)始網(wǎng)絡(luò)之旅。在它們?cè)L問(wèn)這些網(wǎng)頁(yè)時(shí)，它們爬行編碼和副本，它將在網(wǎng)絡(luò)上找到的新網(wǎng)頁(yè)（鏈接）也添加到它的索引之中。對(duì)于這個(gè)過(guò)程，我們可以將爬行程序稱為是正在建立索引，稍后將進(jìn)一步加以討論。 [URL=http://hxc888.cn]GOOGLE排名專家[/URL] 　　爬行程序會(huì)根據(jù)一個(gè)固定的周期回訪其目錄中的站點(diǎn)，尋找任何的更新。至于爬行程序回訪的頻率，這要由搜索引擎確定。網(wǎng)站擁有者通過(guò)采用一個(gè)名為robot.txt的文件確實(shí)能控制爬行程序訪問(wèn)這個(gè)站點(diǎn)的頻率。搜索引擎在進(jìn)一步爬行一個(gè)網(wǎng)站之前首先查看這個(gè)文件。 　　正在成長(zhǎng)的索引 　　索引就像是一個(gè)包含爬行程序所找到網(wǎng)站每一個(gè)網(wǎng)頁(yè)和文件副本的巨大目錄或者詳細(xì)目錄。如果某一個(gè)網(wǎng)頁(yè)發(fā)生了變化，則會(huì)使用新的信息來(lái)更新這個(gè)目錄。為了能使一個(gè)數(shù)量的概念給你描述這些索引的大小，Google最新公布的數(shù)字是80億個(gè)網(wǎng)頁(yè)。 　　有時(shí)候需要一定的時(shí)間才能讓爬行程序找到新的網(wǎng)頁(yè)和更改并添加到自己的索引中。由此，一個(gè)網(wǎng)頁(yè)可能已被“爬行”但尚未“索引”。知道一個(gè)網(wǎng)頁(yè)被索引后——添加到索引中——此時(shí)在搜索引擎中是搜索不到這些被爬行過(guò)的網(wǎng)頁(yè)的。 　　[URL=http://hxc888.cn]搜索引擎的工作模式[/URL] 　　每天，搜索引擎都通過(guò)一個(gè)設(shè)計(jì)好的軟件來(lái)詳細(xì)審核其索引中的數(shù)十億的網(wǎng)頁(yè)索引，并找出哪些與搜索查詢最為匹配以及將其按最為相關(guān)的順序進(jìn)行 排名。 　　搜索引擎面對(duì)的是數(shù)百億需要排序的網(wǎng)頁(yè)，它如何決定相關(guān)性呢？每一個(gè)搜索引擎都已形成了一套規(guī)則和數(shù)學(xué)公式，我們將其稱之為算法，用這種算法來(lái)決定網(wǎng)頁(yè)的排名。 　　至于每一家搜索引擎的算法是如何工作的這是一個(gè)秘密，但常常用來(lái)改進(jìn)一個(gè)網(wǎng)站的排名性能的一般原則大家還是知道的，我們將其稱之為搜索引擎優(yōu)化。 　　搜索引擎不時(shí)簡(jiǎn)單地采用網(wǎng)頁(yè)副本將相關(guān)的網(wǎng)頁(yè)根據(jù)一個(gè)垂直的主題進(jìn)行分組。如果我們?nèi)〕鲆粋€(gè)與電影行業(yè)相關(guān)的網(wǎng)頁(yè)，這些主題或者組可能是娛樂(lè)、電影娛樂(lè)、電影明星娛樂(lè)等等。每一個(gè)主題都有描述這個(gè)組所包含網(wǎng)頁(yè)的公共字和短語(yǔ)。有些網(wǎng)頁(yè)可能不單單屬于一個(gè)組，例如：與電影利潤(rùn)相關(guān)的一個(gè)網(wǎng)頁(yè)可能既屬于金融組又屬于娛樂(lè)組。 　　SERP（或搜索引擎結(jié)果頁(yè)） 　　將此算法應(yīng)用于索引的站點(diǎn)后，根據(jù)所執(zhí)行的搜索，搜索引擎會(huì)給出一些最相關(guān)的搜索結(jié)果。 　　我們來(lái)簡(jiǎn)化一個(gè)復(fù)雜的過(guò)程，當(dāng)一位用戶輸入一個(gè)搜索查詢時(shí)，搜索引擎根據(jù)這個(gè)網(wǎng)頁(yè)對(duì)其認(rèn)為相關(guān)的索引進(jìn)行分析和檢索。如果它具有一個(gè)相關(guān)網(wǎng)頁(yè)的候選名單，它會(huì)依據(jù)另外的算法因素對(duì)這些列表進(jìn)行進(jìn)一步計(jì)算，以便決定以何種順序?qū)⑵湔故窘o用戶。這些因素或許是用戶的位置，當(dāng)然了，甚至也可能是用戶的搜索歷史記錄。 　　每個(gè)搜索引擎所使用的算法是不同的，這就是為什么對(duì)于相同的查詢，每個(gè)搜索引擎所搜索到的結(jié)果不盡相同的原因。每一個(gè)搜索引擎都有自己的小生境，因此，對(duì)于一個(gè)用戶常常同時(shí)使用多個(gè)搜索引擎來(lái)搜索一個(gè)內(nèi)容并不少見(jiàn)。這進(jìn)一步說(shuō)明了網(wǎng)站擁有者將其網(wǎng)站在所有搜索引擎上獲得索引并得到較好的排名是非常重要的。 　　結(jié)論 　　搜索引擎的目標(biāo)是如何適合用戶的口味。它們因此想在第一時(shí)間給用戶提供合適的、相關(guān)的、信息量大的站點(diǎn)來(lái)滿足他們。