中文字幕日韩精品一区二区免费_精品一区二区三区国产精品无卡在_国精品无码专区一区二区三区_国产αv三级中文在线

網(wǎng)站改版帶來的404抓取錯誤解決實踐

2021-10-25    分類: 網(wǎng)站改版

網(wǎng)站制作中一項重要的工作就是改版,每次改版肯定是往好的方面進(jìn)行,因為每個階段的定位不同,我們要網(wǎng)站所表現(xiàn)的企業(yè)形象也不同,而且一個好看大氣的網(wǎng)站絕對能夠在潛在客戶心里提升我們公司的地位。但是多數(shù)的改版對于我們網(wǎng)站的SEO都會造成一定的影響,這里就需要我們對網(wǎng)站的情況掌握的非常熟悉之后,然后進(jìn)行有效地控制,減少改版造成的404頁面過多情況。

1、利用日志分析工具找到404錯誤抓取頁面

日志分析工具利用最常用的光年日志分析工具就可以了,首先利用FTP下載好最近幾天的網(wǎng)站LOG日志,當(dāng)然,想更多的分析,那么多下載一段時間的LOG日志也可以,利用日志分析工具新建任務(wù)分析各個階段的百度蜘蛛抓取情況,這里主要考慮百度抓取情況,因為建立這個分析工作的前提是快照停滯,收錄為 1。這里建議大家分為三個時間段來分析:

a、分析最近一天的LOG日志,可以是今天的,但是最好是昨天的,因為昨天的會比較全,今天的你即使是晚上來分析也會有一部分時間沒有統(tǒng)計到。

B、分析改版之后的LOG日志,因為這涉及到百度蜘蛛對于網(wǎng)站改版的一些判斷,例如我們可以分析百度蜘蛛什么時候開始判斷網(wǎng)站已經(jīng)改版,或者什么時候已經(jīng)放棄對于舊站URL的抓取等等。

C、改版前后抓取量的對比,分析改版對于百度蜘蛛的抓取量影響多大。

至于日志分析工作后面的分析工作都是一鍵式的,具體的分析思路有了之后,我們對照著進(jìn)行分析,就會找到很多平時我們沒有注意到的問題,例如下面出來改版造成的404頁面,還有不少的頁面也是404錯誤,我并沒有意識到,例如下面的wp-login.php頁面就是一個最典型的例子:404錯誤抓取頁面

2、利用百度站長工具中的死鏈提交工具進(jìn)行死鏈提交

百度站長平臺LEE團(tuán)隊說:404狀態(tài)碼代表‘NotFound’,spider更新時會認(rèn)為該頁面已失效,此時呢將在索引庫中刪除,短期內(nèi)spider再次發(fā)現(xiàn)該url不再會抓取。當(dāng)然,百度的說法只能作參考,因為分析網(wǎng)站日志發(fā)現(xiàn),2個多星期百度蜘蛛還是來抓取這些錯誤頁面,當(dāng)然,百度對于404錯誤頁面的指導(dǎo)性操作,還是非常有針對性的。百度站長平臺對404頁面的看法特別是死鏈提交工具中提交死鏈sitemap,這一條大家可以根據(jù)自身的情況進(jìn)行死鏈提交,我這邊提交后暫時還沒有大的效果,因為大家都知道百度的效果展現(xiàn)周期一般都比較長。

3、利用robots.txt和nofollow標(biāo)簽引導(dǎo)蜘蛛抓取

404錯誤頁面一個大的壞處就是給蜘蛛帶來一些錯誤的抓取,浪費(fèi)了蜘蛛抓取資源,舉個例子,首先我們要達(dá)成這樣的一個共識:任何一個網(wǎng)站的蜘蛛抓取訪問資源都是有限的,小網(wǎng)站自然要少很多,而大網(wǎng)站就要多很多,要想蜘蛛抓取率更高,抓取的更合理,那么一些錯誤的鏈接造成的404錯誤量就要盡可能的減少。

當(dāng)前文章:網(wǎng)站改版帶來的404抓取錯誤解決實踐
文章起源:http://www.rwnh.cn/news10/132860.html

網(wǎng)站建設(shè)、網(wǎng)絡(luò)推廣公司-創(chuàng)新互聯(lián),是專注品牌與效果的網(wǎng)站制作,網(wǎng)絡(luò)營銷seo公司;服務(wù)項目有網(wǎng)站改版

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)
兖州市| 孟州市| 抚州市| 富平县| 孟州市| 沁源县| 灵台县| 含山县| 苍溪县| 六枝特区| 晋中市| 丹阳市| 寻乌县| 新乡县| 龙岩市| 巧家县| 施甸县| 曲沃县| 平昌县| 灵寿县| 颍上县| 镇沅| 烟台市| 时尚| 英吉沙县| 澄迈县| 张家港市| 怀化市| 宜兴市| 桐庐县| 邓州市| 米脂县| 桓台县| 大冶市| 枣强县| 城步| 太白县| 铜山县| 杭锦旗| 奈曼旗| 金堂县|