蜘蛛的爬行、頁面的收錄及排序都是自動處理。網(wǎng)站目錄則是一套人工編輯的分類目錄，天津有實(shí)力制作網(wǎng)站由編輯人員人工創(chuàng)建多個層次的分類，站長可以在不同分類里提交網(wǎng)站，目錄編輯在后臺審核所提交的網(wǎng)站，將網(wǎng)站放置于相應(yīng)的分類頁面。有的時候編輯也主動收錄網(wǎng)站。制作網(wǎng)站價格典型的網(wǎng)站目錄包括雅虎目錄、開放目錄、好123等。目錄并不是本書中所討論的SEO所關(guān)注的真正的搜索引擎。雖然網(wǎng)站目錄也常有一個搜索框，但目錄的數(shù)據(jù)來源是人工編輯得到的。

頁面Z下面又是一個贊助商廣告，與頁面頂部的廣告相同。頁面左側(cè)頂部及左側(cè)底部的廣告，天津有實(shí)力制作網(wǎng)站并不是每次搜索有廣告商競價時都會出現(xiàn)，只有點(diǎn)擊率和質(zhì)量分?jǐn)?shù)達(dá)到一定水平的廣告才會出現(xiàn)在左側(cè)頂部或底部。網(wǎng)站優(yōu)化Z關(guān)注的是占據(jù)頁面主體的自然搜索結(jié)果。制作網(wǎng)站價格統(tǒng)計數(shù)據(jù)顯示，自然搜索結(jié)果總點(diǎn)擊訪問數(shù)要遠(yuǎn)遠(yuǎn)大于廣告點(diǎn)擊數(shù)。但是企業(yè)花費(fèi)在網(wǎng)站優(yōu)化上的費(fèi)用卻遠(yuǎn)遠(yuǎn)低于花費(fèi)在搜索廣告上的費(fèi)用。這既是網(wǎng)站優(yōu)化的尷尬，也是Z大的機(jī)會。掌握了網(wǎng)站優(yōu)化流量，才能掌握Z大搜索流量。

有實(shí)力制作網(wǎng)站由于頁面和鏈接數(shù)量巨大，網(wǎng)上的鏈接關(guān)系又時時處在更新中，因此鏈接關(guān)系及PR的計算要耗費(fèi)很長時間。關(guān)子PR和鏈接分析，后面還有專門的章節(jié)介紹。9．特殊文件處理 除了HTML文件外，搜索引擎通常還能抓取和索引以文字為基礎(chǔ)的多種文件類型，如PDF、Word、WPS、XLS、PPT、TXT文件等。制作網(wǎng)站價格我們在搜索結(jié)果中也經(jīng)常會看到這些文件類型。但目前的搜索引擎還不能處理圖片、視頻、Flash這類非文字內(nèi)容，也不能執(zhí)行腳本和程序。

有實(shí)力制作網(wǎng)站站長通過搜索引擎網(wǎng)頁提交表格提交進(jìn)來的網(wǎng)址。蜘蛛按重要性從待訪問地址庫中提取URL，訪問并抓取頁面，然后把這個URL從待訪問地址庫中刪除，放進(jìn)己訪問地址庫中。大部分主流搜索引擎都提供一個表格，讓站長提交網(wǎng)址。制作網(wǎng)站價格不過這些提交來的網(wǎng)址都只是存入地址庫而已，是否收錄還要看頁面重要性如何。搜索引擎所收錄的絕大部分頁面是蜘蛛自己跟蹤鏈接得到的。可以說提交頁面基本上是毫無用處的，搜索引擎更喜歡自己沿著鏈接發(fā)現(xiàn)新頁面。

有實(shí)力制作網(wǎng)站文件存儲搜索引擎蜘蛛抓取的數(shù)據(jù)存入原始頁面數(shù)據(jù)庫。其中的頁面數(shù)據(jù)與用戶瀏覽器得到的HTML是完全一樣的。每個URL都有一個獨(dú)特的文件編號。爬行時的復(fù)制內(nèi)容檢測制作網(wǎng)站價格 檢測并刪除復(fù)制內(nèi)容通常是在下面介紹的預(yù)處理過程中進(jìn)行的，但現(xiàn)在的蜘蛛在爬行和抓取文件時也會進(jìn)行一定程度的復(fù)制內(nèi)容檢測。遇到權(quán)重很低的網(wǎng)站上大量轉(zhuǎn)載或抄襲內(nèi)容時，很可能不再繼續(xù)爬行。這也就是有的站長在日志文件中發(fā)現(xiàn)了蜘蛛，但頁面從來沒有被真正收錄過的原因。