- 相關(guān)推薦
網(wǎng)站改版后如何解決404頁(yè)面抓取錯(cuò)誤的問(wèn)題
網(wǎng)站改版都是希望網(wǎng)站可以很好的進(jìn)行優(yōu)化，但是對(duì)于網(wǎng)站改版的不同階段，搜索引擎會(huì)對(duì)網(wǎng)站進(jìn)行不同的要求。一般網(wǎng)站改版后，對(duì)網(wǎng)站的優(yōu)化都會(huì)造成一些影響，這個(gè)時(shí)候，就進(jìn)行有效地控制，減少改版造成的404頁(yè)面過(guò)多情況。如果搜索引擎對(duì)網(wǎng)站的404錯(cuò)誤頁(yè)面抓取過(guò)多，就會(huì)導(dǎo)致網(wǎng)站有可能被降權(quán)，這對(duì)以后網(wǎng)站權(quán)重的恢復(fù)也會(huì)造成很大的影響。下面具體的跟大家分析下404頁(yè)面的解決情況。
1、利用日志分析工具找到404錯(cuò)誤抓取頁(yè)面
想要知道搜索引擎有沒(méi)有到網(wǎng)站抓取，到網(wǎng)站抓取多少頁(yè)面，抓取了哪些頁(yè)面。這時(shí)就需要對(duì)網(wǎng)站的日志進(jìn)行分析。對(duì)于網(wǎng)站日志的看法比較困難，就可以使用光年日志進(jìn)行轉(zhuǎn)化。首先利用FTP下載好最近幾天的網(wǎng)站LOG日志，當(dāng)然，想更多的分析，那么多下載一段時(shí)間的LOG日志也可以，利用日志分析工具新建任務(wù)分析各個(gè)階段的百度蜘蛛抓取情況。
2、利用百度站長(zhǎng)死鏈提交工具進(jìn)行死鏈提交
對(duì)于404頁(yè)面同，百度搜索引擎是如何進(jìn)行理解的呢?事實(shí)上，對(duì)于404頁(yè)面。百度搜索引擎認(rèn)為404狀態(tài)碼代表‘Not Found'，spider更新時(shí)會(huì)認(rèn)為該頁(yè)面已失效，此時(shí)呢將在索引庫(kù)中刪除，短期內(nèi)spider再次發(fā)現(xiàn)該url不再會(huì)抓取。但是如果通過(guò)網(wǎng)站日志就可以發(fā)現(xiàn)，對(duì)于404頁(yè)面，百度蜘蛛還是會(huì)進(jìn)行抓取的，這也是為什么網(wǎng)站改版以后，百度蜘蛛還是會(huì)對(duì)404錯(cuò)誤頁(yè)面進(jìn)行一些抓取。
3、利用robots.txt和nofollow標(biāo)簽引導(dǎo)蜘蛛抓取
網(wǎng)站存在錯(cuò)誤頁(yè)面時(shí)，百度蜘蛛就會(huì)抓取 到一部分的錯(cuò)誤頁(yè)面。浪費(fèi)了蜘蛛抓取資源，而對(duì)于網(wǎng)站的正確頁(yè)面抓取就會(huì)減少一部份。這就造成頁(yè)面的資源丟失。這時(shí)站長(zhǎng)就需要對(duì)百度蜘蛛進(jìn)行一些引導(dǎo)，讓蜘蛛抓取想讓他抓的一些頁(yè)面，對(duì)于一些404頁(yè)面進(jìn)行robots限制抓取，對(duì)于網(wǎng)站中一些不參與排名的鏈接實(shí)行nofollow，引導(dǎo)蜘蛛抓取重要頁(yè)面。
【網(wǎng)站改版后如何解決404頁(yè)面抓取錯(cuò)誤的問(wèn)題】相關(guān)文章：
網(wǎng)站改版中遇到的SEO問(wèn)題總結(jié)09-21
常見(jiàn)php頁(yè)面漏洞分析及相關(guān)問(wèn)題解決07-08
seo網(wǎng)站頁(yè)面優(yōu)化策略09-03
如何用Excel解決網(wǎng)絡(luò)規(guī)劃問(wèn)題08-23
php如何解決中文亂碼問(wèn)題08-31