在"通過HTTP狀態碼查看搜索引擎蜘蛛如何爬行你 網站”一文中, 我介紹了一些經常涉及到 HTTP狀態碼及含義, 譬如大家經常探討并且與本文相關 Http狀態碼：

404：服務器找不到指定 資源, 請求 網頁不存在(譬如瀏覽器請求 網頁被刪除或者移位, 但不排除日后該鏈接有效 可能性)；
410：請求 網頁不存在(注意：410表示永久性, 而404表示臨時性)；
200：服務器成功返回請求 網頁；
301：網址永久性重定向
302：網址臨時性重定向

注意：大部分搜索引擎將"404”與"410”狀態同等對待, 如Google. (參見Matt Cutts 說明)

對HTTP404狀態碼 理解

　　HTTP 404 錯誤意味著鏈接指向 網頁不存在, 即原始網頁 URL失效, 這種情況經常會發生, 很難避免, 比如說：網頁URL生成規則改變,網頁文件更名或移動位置,導入鏈接拼寫錯誤等, 導致原來 URL地址無法訪問；當Web 服務器接到類似請求時, 會返回一個404 狀態碼, 告訴瀏覽器要請求 資源并不存在. 但 , Web服務器默認 404錯誤頁面, 無論Apache還 IIS, 均十分簡陋,呆板且對用戶不友好, 無法給用戶提供必要 信息以獲取更多線索, 無疑這會造成用戶 流失.

　　因此, 很多網站均使用自定義404錯誤 方式以提供用戶體驗避免用戶流失. 一般而言, 自定義404頁面通用 做法 在頁面中放置網站快速導航鏈接,搜索框以及網站提供 特色服務, 這樣可以有效 幫助用戶訪問站點并獲取需要 信息.

HTTP404對SEO 影響

　　自定義404錯誤頁面 提供用戶體驗 很好 做法, 但在應用過程中往往并未注意到對搜索引擎 影響, 譬如：錯誤 服務器端配置導致返回"200”狀態碼或自定義404錯誤頁面使用Meta Refresh導致返回"302”狀態碼. 正確設置 自定義404錯誤頁面, 不僅應當能夠正確地顯示, 同時, 應該返回"404”錯誤代碼, 而不 "200”或"302”. 雖然對訪問 用戶而言, HTTP狀態碼究竟 "404”還 "200”來說并沒有什么區別, 但對搜索引擎而言, 這則 相當重要 .

(一)自定義404錯誤頁返回"200”狀態碼

　　當搜索引擎蜘蛛在請求某個URL時得到"404”狀態回應時, 即知道該URL已經失效, 便不再索引該網頁, 并向數據中心反饋將該URL表示 網頁從索引數據庫中刪除, 當然, 刪除過程有可能需要很長時間；而當搜索引擎得到"200”狀態回應時, 則會認 該url 有效 , 便會去索引, 并會將其收錄到索引數據庫, 這樣 結果便 這兩個不同 url具有完全相同 內容：自定義404錯誤頁面 內容, 這會導致出現復制網頁問題. 對搜索引擎而言, 特別 Google, 不但很難獲得信任指數TrustRank, 會大大降低Google對網站質量 評定. （ 什么會出現返回"200”狀態碼 情況？？請參看下面內容"自定義404錯誤頁面 基本原則”）

　　我一直在使用Google Sitemap, 當我們提交XML格式網站地圖文件時, Google會驗證我們 身份以確保 網站合法 管理者. 驗證方式有兩種：上傳指定名稱 html頁到網站根目錄或者在網頁meta區域添加一個標識身份 meta標簽. 我通常 使用上傳html網頁 方式, 但Google卻提示我網站根目錄下找不到這個網頁（實際上我已上傳, 并且通過瀏覽器可以訪問）, 這 一個很可怕 問題, 見圖：