搜索引擎蜘蛛在請(qǐng)求某個(gè)URL時(shí)得到“404”狀態(tài)碼回應(yīng)時(shí)，即知道該URL已經(jīng)失效，便不再索引該網(wǎng)頁，并向數(shù)據(jù)中心反饋將該URL表示的網(wǎng)頁從索引數(shù)據(jù)庫中刪除，當(dāng)然，刪除過程有可能需要很長(zhǎng)時(shí)間；而當(dāng)搜索引擎得到“200”狀態(tài)碼時(shí)，則會(huì)認(rèn)為該URL是有效的，便會(huì)去索引，并會(huì)將其收錄到索引數(shù)據(jù)庫，這樣的結(jié)果便是這兩個(gè)不同的URL具有完全相同的內(nèi)容：自定義404錯(cuò)誤頁面的內(nèi)容，這會(huì)導(dǎo)致出現(xiàn)復(fù)制網(wǎng)頁問題，輕則被搜索引擎降權(quán)，重則會(huì)認(rèn)為此網(wǎng)站存在作弊行為而嚴(yán)厲懲罰。

　　

　　要讓404頁面既不會(huì)誤導(dǎo)搜索引擎蜘蛛，又能起到留住用戶的目的，最簡(jiǎn)單的方法就是修改服務(wù)器默認(rèn)的404頁面，使之符合優(yōu)化的需求。另外，現(xiàn)在網(wǎng)絡(luò)中有很多人提供了非常精美和有創(chuàng)意的404頁面，有興趣的站長(zhǎng)也可以根據(jù)自身情況采用，如圖6.22所示。

　　

　　由疏忽或者程序錯(cuò)誤造成的死鏈接以及優(yōu)化

　　

　　由于程序錯(cuò)誤或者網(wǎng)站管理者的疏忽，很容易造成死鏈接，并且這些鏈接因?yàn)槭桥�量生成的，往往�?shù)量很多，而且不容易被發(fā)現(xiàn)。

　　

　　圖有創(chuàng)意的404頁面

　　

　　舉例來說，如果搜索引擎優(yōu)化者錯(cuò)誤地設(shè)置了一個(gè)關(guān)鍵詞鏈接規(guī)則，加入了一個(gè)本身并不能打開的指向網(wǎng)址，這就會(huì)造成所有網(wǎng)站內(nèi)容頁中涉及這個(gè)詞時(shí)產(chǎn)生1個(gè)死鏈接。

　　

　　試想一下，如果這個(gè)詞是這個(gè)網(wǎng)站的主要熱門詞匯，出現(xiàn)的頻率很高，并且網(wǎng)站的內(nèi)容頁足夠多，結(jié)果就是一次更新頁面以后將會(huì)產(chǎn)生無數(shù)個(gè)死鏈接。

　　

　　除了站長(zhǎng)疏忽以外，有些CMS系統(tǒng)在數(shù)據(jù)庫處理刪除、轉(zhuǎn)移內(nèi)容頁操作時(shí)，也很容易產(chǎn)生死鏈接。這種情況產(chǎn)生的死鏈接修改起來比較費(fèi)勁，而且非常不易被發(fā)現(xiàn)。

　　

　　既然死鏈接都不容意被發(fā)現(xiàn)，那么有什么工具或者快速的方法能對(duì)網(wǎng)站的內(nèi)部鏈接進(jìn)行檢測(cè)，進(jìn)而快速找到死鏈接嗎？答案是有的，谷歌官方工具或者很多優(yōu)化者開發(fā)的內(nèi)部鏈接檢查器都可以很好地解決這個(gè)問題。

　　

　　內(nèi)部鏈接優(yōu)化必備工具：鏈接檢查

　　

　　如何查看網(wǎng)站的內(nèi)部鏈接指向情況？如何找出網(wǎng)站中的死鏈接？有很多好用的工具可以解決這個(gè)問題，這里主要介紹兩個(gè)：

　　

　　Google網(wǎng)站管理員工具中的內(nèi)部鏈接統(tǒng)計(jì)功能，可以用于整個(gè)網(wǎng)站的內(nèi)部鏈接報(bào)告；

　　

　　中國站長(zhǎng)站的內(nèi)部鏈接檢查器，可以檢查某個(gè)單頁面的內(nèi)部鏈接情況。

　　

　　網(wǎng)站管理員工具中的內(nèi)部鏈接統(tǒng)計(jì)功能

　　

　　對(duì)有一定頁面規(guī)模的網(wǎng)站來說，內(nèi)部鏈接比較繁雜，不容易統(tǒng)計(jì)，更不容易調(diào)整。這就需要有一個(gè)可以比較好地統(tǒng)計(jì)整個(gè)網(wǎng)站內(nèi)部鏈接情況的工具，搜索引擎優(yōu)化者可以利用統(tǒng)計(jì)報(bào)告進(jìn)行內(nèi)部鏈接結(jié)構(gòu)的調(diào)整。在Google網(wǎng)站管理員工具中，專門提供一個(gè)“內(nèi)部鏈接”統(tǒng)計(jì)報(bào)告，可以滿足這個(gè)需求。