之前做過一個網(wǎng)站遇到這樣的問題：網(wǎng)站改版之后遺留了很多死鏈接，為了讓百度不收錄這些頁面，于是設(shè)置了404頁面，但是后來發(fā)現(xiàn)，這些大量的404頁面百度仍然在收錄，多次向百度提交過死鏈，依然沒有改善。有人說這是百度的問題，很多人都遇到過這種情況。這樣的問題如果屬于比較小型的網(wǎng)站可能很難感覺到影響，但是一旦網(wǎng)站規(guī)模比較大，而且死鏈又比較多，就會對網(wǎng)站本身的收錄、權(quán)重、排名、流量帶來影響。

最后在一些朋友的幫助下，404頁面的收錄問題終于得到解決。這里也說一些題外話，如果你的網(wǎng)站遇到了自己暫時不能解決的問題，不妨多和別人溝通交流，相信會有人能很快的解決你的這些疑難問題。

我們都知道404頁面的一些基本規(guī)則，但是卻很少有人重視，即使你發(fā)現(xiàn)了這些問題也因為感覺問題不大就沒有繼續(xù)深究下去。不過，如果你任由這樣的漏洞存在，時間長了就會自食其果了，所以筆者建議作為站長，任何細微的問題都應(yīng)該有窮追猛打的勁頭。這里，我將自己對404頁面的一些新的認(rèn)識分享出來，也歡迎更多的朋友跟我交流合作。

404頁面會不會被收錄

關(guān)于這個問題，看法并不統(tǒng)一，有人說404頁面不會被收錄，404本身就是告訴搜索引擎以及訪問者這個頁面已經(jīng)不存在了，請繞道或者去其他的頁面逛逛。也有一些人認(rèn)為404頁面會被收錄。在企贏001可以找到比較專業(yè)的說法：搜索引擎不會收錄404頁面，但是有例外的情況，那就是已經(jīng)收錄過的頁面被刪除后設(shè)置的404，百度會收錄。這一點，跟筆者的網(wǎng)站遇到的情況類似，筆者也是通過企贏001的專家才解決了這些問題。

404頁面被收錄的危害：

404頁面收錄的一個特征就是已經(jīng)設(shè)置了404的頁面，百度仍然放出來，可以檢索的到，但是快照一直不會更新。

少數(shù)的404頁面被收錄，或者你的網(wǎng)站本身就沒有多少404頁面，就不會感覺多有多少危害。而對于哪些成立不久，但是發(fā)展快速的網(wǎng)站來說，龐大的數(shù)據(jù)之下就必然有大量的死鏈、錯誤鏈接，這時候你就不能回避404頁面被收錄的問題。讓我們先來看一下404頁面被收錄的一些危害：

1、頁面對搜索引擎來說沒有價值

對于搜索引擎來說，一個URL就是一個頁面，一般來說網(wǎng)站的404頁面都是一樣的設(shè)置，所以一旦搜索引擎蜘蛛抓取了這些頁面，就會導(dǎo)致有大量的頁面內(nèi)容相同，可想而知，搜索引擎會如何對待你的網(wǎng)站。

2、影響其他頁面的收錄和權(quán)重，進而影響流量

網(wǎng)站的權(quán)重影響蜘蛛的抓取時間和抓取次數(shù)，所以一個網(wǎng)站能夠得到多少蜘蛛的多少次抓取都是相對固定的，換句話說蜘蛛在一段時間內(nèi)抓取你網(wǎng)站的數(shù)據(jù)是有限的。假設(shè)蜘蛛把資源都浪費在這些404頁面了，那網(wǎng)站中真正有價值的頁面的抓取量就變少，這些404頁面99%的都因為沒有價值而不會被收錄，這樣就會影響網(wǎng)站的收錄，同時會影響網(wǎng)站的流量。

如果需要刪除被收錄的頁面應(yīng)該如何處理?

1、頁面數(shù)量少，可以設(shè)置成404頁面，404的頁面的狀態(tài)碼必須是404(Not Found)，這樣搜索引擎才會認(rèn)為網(wǎng)頁已經(jīng)失效，會將頁面從搜索結(jié)果中刪除。

2、如果被收錄的頁面數(shù)量多，考慮到網(wǎng)站權(quán)重的問題，可以設(shè)置成301重定向，將權(quán)重專遞下去，不過這一點也需要慎重。

3、你確定這些大量的收錄頁面需要從收錄結(jié)果頁刪除掉，可以利用robots.txt文件，禁止蜘蛛爬行。

實踐中遇到的問題往往比較復(fù)雜，單純從網(wǎng)上搜索關(guān)鍵詞來找答案，一般快速的解決問題，正如前面所說的，與別人溝通、交流才能解決問題，提高自己。

作者：尹濱，原文地址：http://news.qiying001.com/show-5608.html

標(biāo)簽： 404頁面 搜索引擎 已收錄頁面 

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請與原作者聯(lián)系。