2023-04-11 分類: 網(wǎng)站建設(shè)
其實我們做seo網(wǎng)站優(yōu)化的一般來說都是一個全知全能的職位,因為做優(yōu)化做排名影響的因素太多了,就比如我們今天要講的課題,日志的分析如果不會分析看不懂蜘蛛的爬行軌跡,那么在優(yōu)化的過程中出現(xiàn)問題,就很有可能思路是錯的而不自知。
IIS日志的用途就是能夠觀察搜索引擎的蜘蛛來我們網(wǎng)站的爬取情況,可以更近距離的分析和接觸蜘蛛。爬取次數(shù),爬取時間點,爬取高峰期,爬取反應出來的HTTP狀態(tài)碼,為我們帶來清晰的分析便利。
一、各大搜索引擎的蜘蛛名稱:
百度(Baidu)爬蟲名稱(Baiduspider)
谷歌(Google)爬蟲名稱(Googlebot)
雅虎(Yahoo)爬蟲名稱(YahooSlurp)
有道(Yodao)蜘蛛名稱(YodaoBot)
搜狗(sogou)蜘蛛名稱(sogouspider)
MSN的蜘蛛名稱:msnbot
二、IIS分析:
案例日志:61.135.168.22--[11/Jan/2009:04:02:45+0800]"GET/thread-7303-1-1.htmlHTTP/1.1"2008450"-""Baiduspider(+http:-www-baidu-com/search/spider.htm)"
分析:
1、61.135.168.22是訪問了是服務(wù)器IP為這個的網(wǎng)站.
2、11/Jan/2009:04:02:45表示蜘蛛爬行時間
3、GET/thread-7303-1-1.htmlHTTP,表示蜘蛛抓取了這個頁面。
4、200狀態(tài)碼表示蜘蛛抓取頁面成功;404表示蜘蛛抓取頁面失敗。
5、8450表示此次抓取了8450個字節(jié)
6、Baiduspider(+http:-www-baidu-com/search/spider.htm)表示百度蜘蛛的名稱
三、基本狀態(tài)碼:
200:請求已經(jīng)完成,蜘蛛訪問頁面正常
301:已經(jīng)移動,永久重定向
302:臨時重定向
304:蜘蛛爬取后發(fā)現(xiàn),頁面沒有修改
305:使用代理
400:請求錯誤
404:找不到頁面
四、IIS詳細狀態(tài)碼含義:
100-表示已收到請求的一部分,正在繼續(xù)發(fā)送余下部分。
101-切換協(xié)議。
2XX-成功服務(wù)器成功地接受了客戶端請求。(只要是2XX的狀態(tài),都表示成功)
200-確定??蛻舳苏埱笠殉晒?。
201-已創(chuàng)建。
202-已接受。
203-非權(quán)威性信息。
204-無內(nèi)容。
205-重置內(nèi)容。
206-部分內(nèi)容。
300-針對收到請求,服務(wù)器可執(zhí)行多種操作。
301-永久移動轉(zhuǎn)移,請求的內(nèi)容已永久移動其他新位置。
302-臨時移動轉(zhuǎn)移,請求的內(nèi)容已臨時移動新的位置
304-未修改。自從上次請求后,請求的內(nèi)容未修改過。
307-臨時重定向。服務(wù)器目前從不同位置響應請求,但請求者應繼續(xù)使用原有位置來進行以后的請求。
400-錯誤的請求。
401-訪問被拒絕。IIS定義了許多不同的401錯誤,它們指明更為具體的錯誤原因。這些具體的錯誤代碼在瀏覽器中顯示,但不在IIS日志中顯示:
401.1-登錄失敗。
401.2-服務(wù)器配置導致登錄失敗。
401.3-由于ACL對資源的限制而未獲得授權(quán)。
401.4-篩選器授權(quán)失敗。
401.5-ISAPI/CGI應用程序授權(quán)失敗。
401.7-訪問被Web服務(wù)器上的URL授權(quán)策略拒絕。這個錯誤代碼為IIS6.0所專用。
403-禁止訪問:IIS定義了許多不同的403錯誤,它們指明更為具體的錯誤原因:
403.1-執(zhí)行訪問被禁止。
403.2-讀訪問被禁止。
403.3-寫訪問被禁止。
403.4-要求SSL.
403.5-要求SSL128.
403.6-IP地址被拒絕。
403.7-要求客戶端證書。
403.8-站點訪問被拒絕。
403.9-用戶數(shù)過多。
403.10-配置無效。
403.11-密碼更改。
403.12-拒絕訪問映射表。
403.13-客戶端證書被吊銷。
403.14-拒絕目錄列表。
403.15-超出客戶端訪問許可。
403.16-客戶端證書不受信任或無效。
403.17-客戶端證書已過期或尚未生效。
403.18-在當前的應用程序池中不能執(zhí)行所請求的URL.這個錯誤代碼為IIS6.0所專用。
403.19-不能為這個應用程序池中的客戶端執(zhí)行CGI.這個錯誤代碼為IIS6.0所專用。
403.20-Passport登錄失敗。這個錯誤代碼為IIS6.0所專用。
404-未找到請求的內(nèi)容。
404.0-未找到文件或目錄。
404.1-無法在所請求的端口上訪問Web站點。
404.2-Web服務(wù)擴展鎖定策略阻止本請求。
404.3-MIME映射策略阻止本請求。
405-用來訪問本頁面的HTTP謂詞不被允許(方法不被允許)
406-客戶端瀏覽器不接受所請求頁面的MIME類型。
407-要求進行代理身份驗證。
412-前提條件失敗。
413-請求實體太大。
414-請求URI太長。
415-不支持的媒體類型。
416-所請求的范圍無法滿足。
417-執(zhí)行失敗。
423-鎖定的錯誤。
500-服務(wù)器內(nèi)部錯誤。
500.12-應用程序正忙于在Web服務(wù)器上重新啟動。
500.13-Web服務(wù)器太忙。
500.15-不允許直接請求Global.asa.
500.16-UNC授權(quán)憑據(jù)不正確。這個錯誤代碼為IIS6.0所專用。
500.18-URL授權(quán)存儲不能打開。這個錯誤代碼為IIS6.0所專用。
500.100-內(nèi)部ASP錯誤。
501-服務(wù)器無法完成請求的功能。
502-服務(wù)器用作網(wǎng)關(guān)或代理服務(wù)器時收到了無效響應。
502.1-CGI應用程序超時。
502.2-CGI應用程序出錯。
503-服務(wù)不可用。這個錯誤代碼為IIS6.0所專用。
504-網(wǎng)關(guān)超時。
505-HTTP版本不受支持。
網(wǎng)頁標題:詳細羅列出各個搜索引擎蜘蛛日志及服務(wù)器常見狀態(tài)碼含義
網(wǎng)站地址:http://jinyejixie.com/news8/253108.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供ChatGPT、動態(tài)網(wǎng)站、企業(yè)網(wǎng)站制作、網(wǎng)站制作、服務(wù)器托管、商城網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容