3.4　內部優(yōu)化相關名詞

3.4.1　網(wǎng)站地圖

網(wǎng)站地圖又稱“站點地圖”，它就是一個頁面，是存放網(wǎng)站所有重要鏈接的容器。一般該頁面會放置網(wǎng)站上所有希望搜索引擎重點抓取的頁面鏈接（如圖3-16所示）。

多數(shù)網(wǎng)站的鏈接層次比較深，蜘蛛很難全方位深度抓取，有了網(wǎng)站地圖就可以方便搜索引擎蜘蛛深度地抓取網(wǎng)站頁面。網(wǎng)站地圖一般存放在根目錄下并命名為sitemap，然后在網(wǎng)站首頁頁腳加上“網(wǎng)站地圖”錨文本鏈接至sitemap.html頁面為搜索引擎蜘蛛指路，增加搜索引擎對網(wǎng)站重要內容頁面的收錄。

網(wǎng)站地圖分為XML、HTML、TXT三種格式，不同搜索引擎識別的格式不同。

?　百度：建議使用HTML格式的網(wǎng)站地圖。

?　Google：建議使用XML格式的網(wǎng)站地圖。

?　Yahoo：建議使用TXT格式的網(wǎng)站地圖。

不過就目前搜索引擎對站長的開放程度而言，站點地圖的格式并非那么重要了，比如我們通過百度站長平臺（網(wǎng)頁抓取→鏈接提交）就可以提交XML、TXT兩種格式的網(wǎng)站地圖，如圖3-17所示。同時，建議創(chuàng)建HTML格式的網(wǎng)站地圖，便于搜索蜘蛛更深層次地爬取網(wǎng)站內容。

3.4.2　主導航

網(wǎng)站主導航一般就是放在網(wǎng)站最上面，是網(wǎng)站的欄目或主要內容的導入鏈接。一般情況下，導航上的欄目或內容是這個網(wǎng)站最主要的內容，也是除首頁外我們最希望別人進入的頁面。

針對內容較多的網(wǎng)站，一般還會為導航上的主要欄目設置下拉菜單（也稱二級導航），以此擴展用戶及搜索引擎蜘蛛的訪問深度，如圖3-18所示。

3.4.3　次導航

次導航又稱“全站鏈接”，是相對主導航產生的輔助導航，是對主導航內容的擴展或補充，一般放在網(wǎng)站底部（即頁腳部位，如圖3-19所示）。由于種種原因，我們不可能在主導航上放置全部的業(yè)務關鍵詞，就只能通過頁腳部位做關鍵詞錨文本指向對應的URL，做好次導航對于提升網(wǎng)站關鍵詞在搜索引擎上的優(yōu)化排名有著推動作用。

次導航的作用如下：

（1）給層次較深的頁面入口

有些目錄層次比較深的頁面或者欄目首頁沒有入口，可以選擇比較重要的放在次導航給以入口，便于搜索引擎蜘蛛的抓取，降低孤立頁面的數(shù)量。

（2）將權重傳遞到有用的地方

我們可以選擇比較重要的內容放在次導航上并加上精準的關鍵詞，這樣可以在增加頁面關鍵詞密度的同時傳遞較高的權重，并且還可以增加內頁被推薦的相關性，一般次導航中的內容比較容易獲得排名。

（3）為用戶提供多種選擇

當用戶進入網(wǎng)站首頁時可能需要進行多次點擊才能到達需要的頁面，而網(wǎng)站的次導航可以為用戶提供多種選擇，降低用戶的點擊成本以提高用戶體驗。

3.4.4　面包屑導航

面包屑導航（Breadcrumb Navigation）一般出現(xiàn)在網(wǎng)站欄目頁和詳情頁主導航下方，如圖3-20所示，用來告知用戶當前所處的位置。

面包屑導航的兩大作用：

?　告知用戶當前所處的位置，并且可以通過該鏈接方便快捷地返回上一層目錄。

?　方便搜索引擎更深層次地抓取其他目錄／網(wǎng)頁內容。

3.4.5　鏈輪

鏈輪全名為SEO鏈輪（SEO Link Wheels，如圖3-21所示），是從國外引入國內的一種相對有效的SEO策略，主要是在互聯(lián)網(wǎng)上建立大量的獨立網(wǎng)站或在各大門戶網(wǎng)站上開設免費博客，然后將這些獨立站點或博客群單向、有策略、有計劃、緊密地鏈接到一起，并都指向要優(yōu)化的目標網(wǎng)站，以達到提升目標網(wǎng)站在搜索引擎結果中排名的目的。

3.4.6　搜索引擎蜘蛛／機器人

搜索引擎蜘蛛一般指網(wǎng)絡爬蟲，又稱為網(wǎng)頁蜘蛛或網(wǎng)絡機器人，是一種按照一定的規(guī)則自動地抓取萬維網(wǎng)信息的程序或者腳本。

常見的搜索引擎蜘蛛名稱如下。

?　百度蜘蛛：Baiduspider。

?　雅虎蜘蛛：Yahoo! Slurp China或Yahoo!。

?　谷歌蜘蛛：Googlebot。

?　有道蜘蛛：YoudaoBot或YodaoBot。

?　360蜘蛛：360Spider。

?　MSN蜘蛛：msnbot。

?　搜狗蜘蛛：Sogou News Spider。

?　必應蜘蛛：bingbot。

3.4.7　robots.txt

robots.txt即蜘蛛?yún)f(xié)議，全稱為“網(wǎng)絡爬蟲排除標準”（Robots Exclusion Protocol），也稱為爬蟲協(xié)議、機器人協(xié)議等，其作用是告知搜索引擎允許或不允許抓取哪些頁面。

robots.txt是一種純文本格式的文件，使用任何一個常見的文本編輯器（比如Windows系統(tǒng)自帶的記事本）就可以創(chuàng)建和編輯，它是搜索引擎進入網(wǎng)站后第一個爬取的文件，通常放置于網(wǎng)站根目錄下（關于robots.txt文件的用法詳見5.6.2小節(jié)）。

例如淘寶robots.txt的位置為http://www.taobao.com/robots.txt。

3.4.8　404頁面

404頁面是用戶在瀏覽網(wǎng)頁時，服務器無法正常提供信息，或者服務器無法回應，且不知道具體原因所返回的頁面，也稱為404錯誤頁面。404錯誤頁面通常是網(wǎng)站目標頁面被更改或刪除（前面講解死鏈接時有所提及），或者是用戶所輸入的頁面地址本身是錯誤的，由網(wǎng)站服務器反饋回來的提示頁面，如圖3-22所示。

404頁面的作用是避免搜索引擎索引死鏈接而影響收錄，避免搜索引擎降低對網(wǎng)站的信任度而降低排名，避免由于配置錯誤導致大量404返回200狀態(tài)碼引起降權，提升用戶體驗。