介紹過(guò)搜索引擎蜘蛛,順便也介紹下HTTP狀態(tài)碼,之前我們說(shuō)了robots.txt可以限制蜘蛛爬行網(wǎng)站文件,那么怎么知道蜘蛛什么時(shí)候爬行過(guò)自己的網(wǎng)站?爬行后的結(jié)果是什么呢?是抓取了還是?這節(jié)HTTP狀態(tài)碼就會(huì)告訴你,網(wǎng)站日記文件會(huì)把每天搜索引擎蜘蛛爬行記錄以編碼的形式統(tǒng)計(jì)起來(lái),以便我們隨時(shí)查看。
一般在網(wǎng)站日志中,最常見(jiàn)的HTTP狀態(tài)碼就是200和404。
其他常見(jiàn)的HTTP狀態(tài)碼以及其代表的含義有:
成功2××成功處理了請(qǐng)求的狀態(tài)碼。
200服務(wù)器已成功處理了請(qǐng)求并提供了請(qǐng)求的網(wǎng)頁(yè)。
204服務(wù)器成功處理了請(qǐng)求,但沒(méi)有返回任何內(nèi)容
重定向3××每次請(qǐng)求中使用重定向不要超過(guò)5次。
301請(qǐng)求的網(wǎng)頁(yè)已永久移動(dòng)到新位置。當(dāng)URLs發(fā)生變化時(shí),使用301代碼。搜索引擎索引中保存新的URL。
302請(qǐng)求的網(wǎng)頁(yè)臨時(shí)移動(dòng)到新位置。搜索引擎索引中保存原來(lái)的URL。
304如果網(wǎng)頁(yè)自請(qǐng)求者上次請(qǐng)求后沒(méi)有更新,則用304代碼告訴搜索引擎機(jī)器人,可節(jié)省帶寬和開銷。
客戶端錯(cuò)誤4××表示請(qǐng)求可能出錯(cuò),妨礙了服務(wù)器的處理。
400服務(wù)器不理解請(qǐng)求的語(yǔ)法。
403服務(wù)器拒絕請(qǐng)求。
404服務(wù)器找不到請(qǐng)求的網(wǎng)頁(yè)。服務(wù)器上不存在的網(wǎng)頁(yè)經(jīng)常會(huì)返回此代碼。
410請(qǐng)求的資源永久刪除后,服務(wù)器返回此響應(yīng)。該代碼與404(未找到)代碼相似,但在資源以前存在而現(xiàn)在不存在的情況下,有時(shí)用來(lái)替代404代碼。如果資源已永久刪除,應(yīng)當(dāng)使用301指定資源的新位置。
服務(wù)器錯(cuò)誤5××表示服務(wù)器在處理請(qǐng)求時(shí)發(fā)生內(nèi)部錯(cuò)誤。這些錯(cuò)誤可能是服務(wù)器本身的錯(cuò)誤,而不是請(qǐng)求出錯(cuò)。
500服務(wù)器遇到錯(cuò)誤,無(wú)法完成請(qǐng)求。
503服務(wù)器目前無(wú)法使用(由于超載或停機(jī)維護(hù))。通常,這只是暫時(shí)狀態(tài)。
怎么看網(wǎng)站日志?
通過(guò)Ftp,在根目錄下可以看到一個(gè)包含log的文件夾,這就是網(wǎng)站日志。下載、解壓,里面的txt文件內(nèi)容就是日志記錄。但也有一些服務(wù)器或虛擬主機(jī)沒(méi)有提供log文件,請(qǐng)與主機(jī)商聯(lián)系,或自己開通服務(wù)器的記錄日志功能。
網(wǎng)站日志中怎么看搜索引擎蜘蛛?之前我們介紹什么是搜索引擎蜘蛛的時(shí)候介紹過(guò)各搜索引擎蜘蛛名稱。
創(chuàng)新互聯(lián)建站-企業(yè)級(jí)云服務(wù)器提供商,為用戶提供云服務(wù)器、CDN、云安全服務(wù)、成都服務(wù)器托管、服務(wù)器租用、高防主機(jī)等全方位云服務(wù)與各行業(yè)解決方案,幫助企業(yè)及個(gè)人極速備案,輕松上云,安全無(wú)憂。
當(dāng)前題目:什么是HTTP狀態(tài)碼?
分享網(wǎng)址:http://vcdvsql.cn/article48/esdhep.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設(shè)計(jì)、ChatGPT、App開發(fā)、云服務(wù)器、網(wǎng)頁(yè)設(shè)計(jì)公司、靜態(tài)網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)