2013-06-22 分類: 網(wǎng)站建設(shè)
是什么原因?qū)е滤阉饕嬷┲朐谧ト【W(wǎng)頁的時候無法爬行我們的頁面?這個問題可能困擾著不少在做SEO優(yōu)化的人員,這種“抓取非?!钡那闆r,是由哪些原因引發(fā)的呢?下面我們來一起進(jìn)行盤點(diǎn)。
1、服務(wù)器鏈接異常
服務(wù)器鏈接異常會有兩種環(huán)境:一種是站點(diǎn)不穩(wěn)固,百度spider實(shí)驗鏈接您網(wǎng)站的服務(wù)器時呈現(xiàn)臨時沒法鏈接的環(huán)境:另一種是百度spider不停沒法鏈接上您網(wǎng)站的服務(wù)器。
出現(xiàn)上述情況的原因可能是網(wǎng)站服務(wù)器過大,超負(fù)荷運(yùn)轉(zhuǎn);也有可能是網(wǎng)站運(yùn)轉(zhuǎn)不一般,請查抄網(wǎng)站的web服務(wù)器是不是安裝且一般運(yùn)轉(zhuǎn),并利用掃瞄器查抄重要頁面可否一般拜候。您的網(wǎng)站和主機(jī)還大概制止了空間大概購置cdn辦事。
2、IP封禁
限定收集的出口IP地點(diǎn),克制該IP段的利用者舉行內(nèi)容拜候,在這里特指封禁了百度spiderIP。當(dāng)您的網(wǎng)站不盼望百度spider拜候時,才必要該設(shè)置。假如您盼望百度spiderIP。也有大概是您網(wǎng)站地點(diǎn)的空間辦事商把百度IP舉行了封禁,這時候您必要接洽辦事商變動設(shè)置。
3、DNS非常
當(dāng)百度spider沒法剖析您網(wǎng)站的IP時,會呈現(xiàn)DNS非常。大概是您的網(wǎng)站IP地點(diǎn)毛病,大概域名辦事商把百度spider封禁。請利用WHOIS大概host查詢本身網(wǎng)站IP地點(diǎn)是不是精確且可剖析,假如不精確或沒法剖析,請與域名注冊商接洽,更新你的IP地點(diǎn)。
4、死鏈
頁面已無效,沒法對用戶供給任何有代價信息的頁面就是死鏈接,包羅和談死鏈和內(nèi)容死鏈兩種情勢。和談死鏈,即頁面的TCP和談狀況、HTTP和談狀況明白表現(xiàn)的死鏈,常見的如404、403、502狀況等;內(nèi)容死鏈,即服務(wù)器返回狀況是一般的,但內(nèi)容已變動為不存在、已刪除或必要權(quán)限等與原內(nèi)容無關(guān)的信息頁面的死鏈。
5、UA封禁
UA即為用戶署理(User-Agent),服務(wù)器經(jīng)由歷程UA辨認(rèn)拜候者的身份。當(dāng)網(wǎng)站針對指定UA的拜候,呈現(xiàn)返回非常頁面(如404、500)或跳轉(zhuǎn)到其他頁面的環(huán)境,即為UA封禁。當(dāng)您的網(wǎng)站不盼望百度spider拜候時,才必要該設(shè)置;假如您盼望百度spider拜候您的網(wǎng)站,檢察usragent的相干設(shè)置中是不是百度spiderUA,予以實(shí)時點(diǎn)竄。
6、非常跳轉(zhuǎn)
講收集哀求從頭指向其他位置即為跳轉(zhuǎn),非常跳轉(zhuǎn)指的是以下幾種環(huán)境。
(1)當(dāng)前該頁面為無效頁面(內(nèi)容已刪除、死鏈等),間接跳轉(zhuǎn)到前一目次大概首頁。百度發(fā)起站長將該無效頁面的進(jìn)口超鏈接刪撤除。
(2)跳轉(zhuǎn)到墮落大概無效頁面。(注:對付長時候跳轉(zhuǎn)到其他域名的環(huán)境,如網(wǎng)站調(diào)換域名,百度發(fā)起利用201跳轉(zhuǎn)和談舉行設(shè)置。)
有一些質(zhì)量高的網(wǎng)站,如果是因為以上原因?qū)е滤阉饕嬷┲霟o法爬取,無論是對站點(diǎn)來說,對搜索引擎來說都是一種損失。所以,SEO優(yōu)化人員一定要及時甄別異常,這樣才能維持網(wǎng)站的排名穩(wěn)定。
網(wǎng)站欄目:SEO優(yōu)化中爬蟲蜘蛛無法抓取的原因
文章源于:http://jinyejixie.com/news/1809.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供用戶體驗、網(wǎng)頁設(shè)計公司、服務(wù)器托管、標(biāo)簽優(yōu)化、動態(tài)網(wǎng)站、商城網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容