什么是HTTP狀態(tài)碼？發(fā)布者：本站     時(shí)間：2020-05-14 16:05:38

介紹過(guò)搜索引擎蜘蛛，順便也介紹下HTTP狀態(tài)碼，之前我們說(shuō)了robots.txt可以限制蜘蛛爬行網(wǎng)站文件，那么怎么知道蜘蛛什么時(shí)候爬行過(guò)自己的網(wǎng)站？爬行后的結果是什么呢？是抓取了還是？這節HTTP狀態(tài)碼就會(huì )告訴你，網(wǎng)站日記文件會(huì )把每天搜索引擎蜘蛛爬行記錄以編碼的形式統計起來(lái)，以便我們隨時(shí)查看。

一般在網(wǎng)站日志中，最常見(jiàn)的HTTP狀態(tài)碼就是200和404。

其他常見(jiàn)的HTTP狀態(tài)碼以及其代表的含義有：

成功2××成功處理了請求的狀態(tài)碼。

200服務(wù)器已成功處理了請求并提供了請求的網(wǎng)頁(yè)。

204服務(wù)器成功處理了請求，但沒(méi)有返回任何內容

重定向3××每次請求中使用重定向不要超過(guò)5次。

301請求的網(wǎng)頁(yè)已永久移動(dòng)到新位置。當URLs發(fā)生變化時(shí)，使用301代碼。搜索引擎索引中保存新的URL。

302請求的網(wǎng)頁(yè)臨時(shí)移動(dòng)到新位置。搜索引擎索引中保存原來(lái)的URL。

304如果網(wǎng)頁(yè)自請求者上次請求后沒(méi)有更新，則用304代碼告訴搜索引擎機器人，可節省帶寬和開(kāi)銷(xiāo)。

客戶(hù)端錯誤4××表示請求可能出錯，妨礙了服務(wù)器的處理。

400服務(wù)器不理解請求的語(yǔ)法。

403服務(wù)器拒絕請求。

404服務(wù)器找不到請求的網(wǎng)頁(yè)。服務(wù)器上不存在的網(wǎng)頁(yè)經(jīng)常會(huì )返回此代碼。

410請求的資源永久刪除后，服務(wù)器返回此響應。該代碼與404（未找到）代碼相似，但在資源以前存在而現在不存在的情況下，有時(shí)用來(lái)替代404代碼。如果資源已永久刪除，應當使用301指定資源的新位置。

服務(wù)器錯誤5××表示服務(wù)器在處理請求時(shí)發(fā)生內部錯誤。這些錯誤可能是服務(wù)器本身的錯誤，而不是請求出錯。

500服務(wù)器遇到錯誤，無(wú)法完成請求。

503服務(wù)器目前無(wú)法使用（由于超載或停機維護）。通常，這只是暫時(shí)狀態(tài)。

怎么看網(wǎng)站日志？

通過(guò)Ftp，在根目錄下可以看到一個(gè)包含log的文件夾，這就是網(wǎng)站日志。下載、解壓，里面的txt文件內容就是日志記錄。但也有一些服務(wù)器或虛擬主機沒(méi)有提供log文件，請與主機商聯(lián)系，或自己開(kāi)通服務(wù)器的記錄日志功能。

網(wǎng)站日志中怎么看搜索引擎蜘蛛？之前我們介紹什么是搜索引擎蜘蛛的時(shí)候介紹過(guò)各搜索引擎蜘蛛名稱(chēng)。