2013-06-22 分類: 網(wǎng)站建設(shè)
是什么原因?qū)е滤阉饕嬷┲朐谧ト【W(wǎng)頁(yè)的時(shí)候無(wú)法爬行我們的頁(yè)面?這個(gè)問題可能困擾著不少在做SEO優(yōu)化的人員,這種“抓取非?!钡那闆r,是由哪些原因引發(fā)的呢?下面我們來(lái)一起進(jìn)行盤點(diǎn)。
1、服務(wù)器鏈接異常
服務(wù)器鏈接異常會(huì)有兩種環(huán)境:一種是站點(diǎn)不穩(wěn)固,百度spider實(shí)驗(yàn)鏈接您網(wǎng)站的服務(wù)器時(shí)呈現(xiàn)臨時(shí)沒法鏈接的環(huán)境:另一種是百度spider不停沒法鏈接上您網(wǎng)站的服務(wù)器。
出現(xiàn)上述情況的原因可能是網(wǎng)站服務(wù)器過大,超負(fù)荷運(yùn)轉(zhuǎn);也有可能是網(wǎng)站運(yùn)轉(zhuǎn)不一般,請(qǐng)查抄網(wǎng)站的web服務(wù)器是不是安裝且一般運(yùn)轉(zhuǎn),并利用掃瞄器查抄重要頁(yè)面可否一般拜候。您的網(wǎng)站和主機(jī)還大概制止了空間大概購(gòu)置cdn辦事。
2、IP封禁
限定收集的出口IP地點(diǎn),克制該IP段的利用者舉行內(nèi)容拜候,在這里特指封禁了百度spiderIP。當(dāng)您的網(wǎng)站不盼望百度spider拜候時(shí),才必要該設(shè)置。假如您盼望百度spiderIP。也有大概是您網(wǎng)站地點(diǎn)的空間辦事商把百度IP舉行了封禁,這時(shí)候您必要接洽辦事商變動(dòng)設(shè)置。
3、DNS非常
當(dāng)百度spider沒法剖析您網(wǎng)站的IP時(shí),會(huì)呈現(xiàn)DNS非常。大概是您的網(wǎng)站IP地點(diǎn)毛病,大概域名辦事商把百度spider封禁。請(qǐng)利用WHOIS大概host查詢本身網(wǎng)站IP地點(diǎn)是不是精確且可剖析,假如不精確或沒法剖析,請(qǐng)與域名注冊(cè)商接洽,更新你的IP地點(diǎn)。
4、死鏈
頁(yè)面已無(wú)效,沒法對(duì)用戶供給任何有代價(jià)信息的頁(yè)面就是死鏈接,包羅和談死鏈和內(nèi)容死鏈兩種情勢(shì)。和談死鏈,即頁(yè)面的TCP和談狀況、HTTP和談狀況明白表現(xiàn)的死鏈,常見的如404、403、502狀況等;內(nèi)容死鏈,即服務(wù)器返回狀況是一般的,但內(nèi)容已變動(dòng)為不存在、已刪除或必要權(quán)限等與原內(nèi)容無(wú)關(guān)的信息頁(yè)面的死鏈。
5、UA封禁
UA即為用戶署理(User-Agent),服務(wù)器經(jīng)由歷程UA辨認(rèn)拜候者的身份。當(dāng)網(wǎng)站針對(duì)指定UA的拜候,呈現(xiàn)返回非常頁(yè)面(如404、500)或跳轉(zhuǎn)到其他頁(yè)面的環(huán)境,即為UA封禁。當(dāng)您的網(wǎng)站不盼望百度spider拜候時(shí),才必要該設(shè)置;假如您盼望百度spider拜候您的網(wǎng)站,檢察usragent的相干設(shè)置中是不是百度spiderUA,予以實(shí)時(shí)點(diǎn)竄。
6、非常跳轉(zhuǎn)
講收集哀求從頭指向其他位置即為跳轉(zhuǎn),非常跳轉(zhuǎn)指的是以下幾種環(huán)境。
(1)當(dāng)前該頁(yè)面為無(wú)效頁(yè)面(內(nèi)容已刪除、死鏈等),間接跳轉(zhuǎn)到前一目次大概首頁(yè)。百度發(fā)起站長(zhǎng)將該無(wú)效頁(yè)面的進(jìn)口超鏈接刪撤除。
(2)跳轉(zhuǎn)到墮落大概無(wú)效頁(yè)面。(注:對(duì)付長(zhǎng)時(shí)候跳轉(zhuǎn)到其他域名的環(huán)境,如網(wǎng)站調(diào)換域名,百度發(fā)起利用201跳轉(zhuǎn)和談舉行設(shè)置。)
有一些質(zhì)量高的網(wǎng)站,如果是因?yàn)橐陨显驅(qū)е滤阉饕嬷┲霟o(wú)法爬取,無(wú)論是對(duì)站點(diǎn)來(lái)說(shuō),對(duì)搜索引擎來(lái)說(shuō)都是一種損失。所以,SEO優(yōu)化人員一定要及時(shí)甄別異常,這樣才能維持網(wǎng)站的排名穩(wěn)定。
當(dāng)前名稱:SEO優(yōu)化中爬蟲蜘蛛無(wú)法抓取的原因
當(dāng)前路徑:http://www.rwnh.cn/news9/1809.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供面包屑導(dǎo)航、營(yíng)銷型網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)、網(wǎng)站營(yíng)銷、品牌網(wǎng)站建設(shè)、微信公眾號(hào)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容