域名預(yù)訂/競(jìng)價(jià)，好“米”不錯(cuò)過(guò)
404頁(yè)面出現(xiàn)在用戶(hù)或蜘蛛訪問(wèn)網(wǎng)站不存在url時(shí)，一般內(nèi)容轉(zhuǎn)移或url結(jié)構(gòu)改變時(shí)會(huì)造成404狀態(tài)頁(yè)面。尤其在網(wǎng)站改版時(shí)，內(nèi)容及網(wǎng)站結(jié)構(gòu)的調(diào)整很可能造成大量舊的url無(wú)法訪問(wèn)，這些無(wú)法訪問(wèn)的頁(yè)面對(duì)用戶(hù)及搜索引擎都是有負(fù)面影響的。
百度官方在公告中明確指出：
404頁(yè)面是網(wǎng)絡(luò)服務(wù)器返回的http狀態(tài)碼表示網(wǎng)頁(yè)未找到，用戶(hù)及蜘蛛無(wú)法訪問(wèn)，是一種協(xié)議死鏈。這種死鏈頁(yè)面需主動(dòng)推送，使搜索引擎能夠更快地發(fā)現(xiàn)并做相應(yīng)處理，減少404死鏈內(nèi)容對(duì)用戶(hù)及搜索引擎造成的負(fù)面影響。
另外，在百度官方抓取異常說(shuō)明中也談到這個(gè)問(wèn)題：
一、什么是死鏈?
頁(yè)面已經(jīng)無(wú)效，無(wú)法對(duì)用戶(hù)提供任何有價(jià)值信息的頁(yè)面就是死鏈接，包括協(xié)議死鏈和內(nèi)容死鏈兩種形式。
協(xié)議死鏈：頁(yè)面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死鏈，常見(jiàn)的如404、403、503狀態(tài)等。
內(nèi)容死鏈：服務(wù)器返回狀態(tài)是正常的，但內(nèi)容已經(jīng)變更為不存在、已刪除或需要權(quán)限等與原內(nèi)容無(wú)關(guān)的信息頁(yè)面。
對(duì)于死鏈，建議通過(guò)百度站長(zhǎng)平臺(tái)--死鏈工具提交死鏈的方式進(jìn)行處理，以便搜索引擎更快地發(fā)現(xiàn)死鏈，減少死鏈對(duì)用戶(hù)以及搜索引擎造成的負(fù)面影響。
二、抓取異常對(duì)網(wǎng)站的影響有哪些?
對(duì)于大量?jī)?nèi)容無(wú)法正常抓取的網(wǎng)站，搜索引擎會(huì)認(rèn)為網(wǎng)站存在用戶(hù)體驗(yàn)上的缺陷，并降低對(duì)網(wǎng)站的評(píng)價(jià)，在抓取、索引、權(quán)重上都會(huì)受到一定程度的負(fù)面影響，最終影響到網(wǎng)站從百度獲取的流量。
三、及時(shí)處理死鏈可以給站長(zhǎng)帶來(lái)什么?
當(dāng)網(wǎng)站死鏈數(shù)據(jù)累積過(guò)多時(shí)，并且被展示到搜索結(jié)果頁(yè)中，對(duì)網(wǎng)站本身的訪問(wèn)體驗(yàn)和用戶(hù)轉(zhuǎn)化都起到了負(fù)面影響。另一方面，百度檢查死鏈的流程也會(huì)為網(wǎng)站帶來(lái)額外負(fù)擔(dān)，影響網(wǎng)站其他正常頁(yè)面的抓取和索引。
優(yōu)化用戶(hù)體驗(yàn)：減少死鏈對(duì)網(wǎng)站品牌的損傷和用戶(hù)的差評(píng)度
改善網(wǎng)站排名：減少死鏈對(duì)線上搜索排名的負(fù)面影響
增加網(wǎng)站收錄：提交死鏈列表后，增加網(wǎng)站內(nèi)容的收錄幾率
提升網(wǎng)站流量：排名和收錄改善后，間接提升網(wǎng)站流量
由上述內(nèi)容可明確看出，404頁(yè)面確定會(huì)對(duì)搜索引擎造成負(fù)面影響，甚至可能會(huì)造成網(wǎng)站的降權(quán)!
因而，若網(wǎng)站改版后造成舊url無(wú)法訪問(wèn)出現(xiàn)大量404頁(yè)面時(shí)，需要將這些鏈接通過(guò)百度站長(zhǎng)工具提交，若量過(guò)大無(wú)法提交，則需在robots.txt中禁止搜索引擎爬取，這樣就可以有效的避免蜘蛛在爬取網(wǎng)站時(shí)出現(xiàn)大量404狀態(tài)碼而造成蜘蛛資源的浪費(fèi)及權(quán)重的流失、差的蜘蛛“印象”等一系列降權(quán)可能。
根據(jù)404頁(yè)面url結(jié)構(gòu)在robots.txt中進(jìn)行disallow。如笨鳥(niǎo)博客最近的一次改版將tag頁(yè)面原有的/post/tag/結(jié)構(gòu)改為/tag/更改了tag頁(yè)的目錄層級(jí)及所屬以利于網(wǎng)站整體目錄清晰便于統(tǒng)計(jì)等，由此產(chǎn)生的大量404頁(yè)面笨鳥(niǎo)在robots.txt中以Disallow:/post/tag/形式禁止抓取。
大量404頁(yè)面會(huì)明顯造成蜘蛛資源的浪費(fèi)，尤其對(duì)于中小網(wǎng)站，其負(fù)面影響不容忽視!
申請(qǐng)創(chuàng)業(yè)報(bào)道，分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處，共同探討創(chuàng)業(yè)新機(jī)遇！
