為保證“廣泛的關(guān)鍵詞”策略的有效性，網(wǎng)站需要進(jìn)行組織，讓搜索引擎可以順利地遍歷或檢索網(wǎng)站內(nèi)的所有網(wǎng)頁。為了更好的理解這一點(diǎn)，讓我們先來看看搜索引擎的Spiders是如何遍歷網(wǎng)站的。
在對(duì)網(wǎng)站建設(shè)公司www.0hh0x.cn的第一次造訪中，Spider首先會(huì)取得一個(gè)叫做Robots.txt的文件來決定是否允許它檢索。
當(dāng)Spiders從另外一個(gè)站點(diǎn)發(fā)現(xiàn)你網(wǎng)站的鏈接時(shí)，若Robots.txt文件里并未聲明不允許它訪問該頁面，則Spiders會(huì)把這個(gè)頁面保存下來。它不一定就是主頁，也可能是你網(wǎng)站的其它頁面。
Spider在對(duì)這一頁進(jìn)行檢索時(shí)，它會(huì)從中摘錄一些關(guān)于內(nèi)容方面的信息和頁面上的所有鏈接，并將其放入搜索引擎的數(shù)據(jù)庫里面。如果它所認(rèn)為你的網(wǎng)站十分重要，它稍后會(huì)檢索這些鏈接頁面。
如果你在網(wǎng)站的每個(gè)頁面上都放了一組指向網(wǎng)站主要部分的鏈接(網(wǎng)站全局導(dǎo)航鏈接)，那么接下來這些鏈接頁極有可能得到Spider的檢索。假設(shè)網(wǎng)站上的每個(gè)頁面上都依次放有指向網(wǎng)站主要內(nèi)容的鏈接，那么搜索引擎要想遍歷整個(gè)網(wǎng)站真是易如反掌。
因而，最有效的網(wǎng)站結(jié)構(gòu)當(dāng)屬自頂而下(Top-Down)或金字塔型設(shè)計(jì)結(jié)構(gòu)。規(guī)模較大的網(wǎng)站應(yīng)設(shè)立一個(gè)網(wǎng)站地圖頁，用以列出網(wǎng)站的所有內(nèi)部鏈接頁。許多人對(duì)文本鏈接方式的網(wǎng)站導(dǎo)航持排斥態(tài)度(可能因?yàn)樗荒敲雌涟?，而是熱衷于Flash或動(dòng)態(tài)網(wǎng)頁(DHTML)形式的菜單。使用這種導(dǎo)航方式的人要當(dāng)心了，因?yàn)樗阉饕婺壳吧袩o法很好地支持這種導(dǎo)航系統(tǒng)。不過別擔(dān)心，只需將文本導(dǎo)航鏈接放到網(wǎng)頁的最下方，這樣既保持了你喜歡的網(wǎng)站風(fēng)格，又向搜索引擎提供了更對(duì)它們口味的東西，可謂皆大歡喜。
內(nèi)容清楚的文字性鏈接不但可使你的網(wǎng)站很容易得到Spiders的檢索，而且對(duì)我們這些真實(shí)的訪問者來說亦一目了然。做文字鏈接時(shí)需注意一個(gè)問題：盡量讓網(wǎng)站的內(nèi)容只需最多兩三次點(diǎn)擊就可以打開，可創(chuàng)建一個(gè)網(wǎng)站地圖把這些鏈接放到一起。