對(duì)于網(wǎng)站優(yōu)化來(lái)說(shuō)，搜索引擎日志分析是必不可少的一塊，無(wú)論你是收錄上百的小型網(wǎng)站，還是收錄上百萬(wàn)的大中型網(wǎng)站，SEO要想做得好，都必需進(jìn)行科學(xué)的日志分析，日志是發(fā)生在網(wǎng)站服務(wù)器上的所有事件的記錄，包括用戶訪問(wèn)記錄，搜索引擎抓取記錄，對(duì)于一些大型網(wǎng)站來(lái)說(shuō)，每天的日志都有好幾個(gè)G大小的，我們可以使用linux命令去進(jìn)行分離的，在大型網(wǎng)站日志文件往往是機(jī)密文件，一般人是看不到的，因?yàn)閺娜罩纠镞吙梢苑治鲈L客趨勢(shì)、地區(qū)趨勢(shì)等，我們做SEO的不需要那么多數(shù)據(jù)，我們只要分析搜索引擎的抓取記錄這一塊就可以了，所以再大的數(shù)據(jù)量，如果經(jīng)過(guò)處理后，也就不會(huì)特別大了，況且現(xiàn)在的硬盤(pán)這么便宜，存儲(chǔ)日志文件還是可以考慮的。那么我們主要分析日志的什么數(shù)據(jù)呢？

1、每個(gè)搜索引擎的總體抓取量（以及趨勢(shì)）

在日志文件中，明確的記錄了每個(gè)搜索引擎的抓取量，例如百度、谷歌、搜狗等搜索引擎的抓取記錄，我們都可以進(jìn)行記錄，使用DOS命令或者Linux命令都可以去實(shí)現(xiàn)的，搜索引擎的收錄是由抓取量以及文章質(zhì)量來(lái)決定的，當(dāng)文章質(zhì)量不變的情況下，蜘蛛抓取量越大，那么收錄的就會(huì)越多，我們?cè)谶M(jìn)行日志分析 時(shí)候，一定要清楚的知道蜘蛛每天的抓取量到底是一個(gè)什么情況，而且每天都要記錄，也許絕對(duì)值說(shuō)明不了什么，我們可以去看它的趨勢(shì)，當(dāng)某一天抓取量的趨勢(shì)在下降時(shí)，我們就要去找原因了。

2、記錄搜索引擎蜘蛛的不重復(fù)抓取量

上一步我們把蜘蛛的抓取量數(shù)據(jù)給分析出來(lái)了，然后我們要進(jìn)行去重，也就是搜索引擎的唯一不重復(fù)抓取量，其實(shí)對(duì)于收錄來(lái)說(shuō)，許多頁(yè)面只要抓取一次就可以了，可是在實(shí)際操作的過(guò)程當(dāng)中，許多頁(yè)面都是被重復(fù)抓取的，谷歌的技術(shù)比較先進(jìn)一些，重復(fù)抓取率也許會(huì)低一些，可是百度等搜索引擎，重復(fù)抓取率卻非常高，你通過(guò)日志分析就可以看出來(lái)了，一天如果抓取量上百萬(wàn)，可能好幾萬(wàn)次都是抓取首頁(yè)的，所以許多數(shù)據(jù)你一定要去分析的，當(dāng)你分析了后，你才會(huì)知道問(wèn)題的嚴(yán)重性。

3、每個(gè)目錄、每個(gè)搜索引擎的抓取量

上邊兩步把總體抓取量、不重復(fù)抓取量記錄下來(lái)了，然后我們要分析出每個(gè)搜索引擎對(duì)每一個(gè)目錄的抓取情況是怎么樣的，這樣利于進(jìn)行分塊優(yōu)化，例如當(dāng)你網(wǎng)站流量上升時(shí)，你可以知道是哪個(gè)目錄的流量上升了，然后再往下推，看看是哪個(gè)目錄的抓取量上升了，哪個(gè)目錄的抓取量下降了，為什么下降，都可以進(jìn)行分析的，然后在網(wǎng)站中進(jìn)行適當(dāng)?shù)逆溄咏Y(jié)構(gòu)調(diào)整，例如使用nofollow標(biāo)簽等。

4、統(tǒng)計(jì)搜索引擎抓取的狀態(tài)碼

當(dāng)搜索引擎抓取了你的頁(yè)面后，不但抓取了你的內(nèi)容，而且還會(huì)有一個(gè)抓取返回碼的，這些返回碼我們要記錄下來(lái)，特別是一些類(lèi)似301、404、500等這些狀態(tài)碼，我們從這些狀態(tài)碼中我們找出網(wǎng)站的一些潛在的問(wèn)題，例如為什么會(huì)出現(xiàn)很多404頁(yè)面，是程序原因，還是搜索引擎在抓取外鏈的時(shí)候提取錯(cuò)誤，其實(shí)我們可以在谷歌管理員工具中看到這些數(shù)據(jù)的，里邊還會(huì)提示你的錯(cuò)誤的404頁(yè)面出現(xiàn)在哪里，對(duì)于一些301狀態(tài)碼我們也要注意了，看下這些301是不是按照我們所希望的那樣跳轉(zhuǎn)的，網(wǎng)站中要盡量的少用跳轉(zhuǎn)，頁(yè)面在跳轉(zhuǎn)的時(shí)候，往往會(huì)延長(zhǎng)頁(yè)面的加載時(shí)間，最常見(jiàn)的301可能就是網(wǎng)頁(yè)URL不帶“/”的跳轉(zhuǎn)到帶“/”的情況了，我們?cè)诰W(wǎng)站中，要盡量的避免出現(xiàn)這樣的情況。

5、統(tǒng)計(jì)搜索引擎蜘蛛來(lái)的次數(shù)、來(lái)的時(shí)間

我們可以使用一些日志分析工具，設(shè)定一個(gè)標(biāo)準(zhǔn)，例如光年日志分析工具，可以統(tǒng)計(jì)出每個(gè)搜索引擎蜘蛛每天來(lái)的次數(shù)，一天一共在我們網(wǎng)站停留了多久，有沒(méi)有IP蜘蛛一天24小時(shí)都在我們網(wǎng)站不停的抓取，這樣的蜘蛛越多越好，往往是你網(wǎng)站權(quán)重提升的表現(xiàn)。這樣的數(shù)據(jù)可以每天都記錄下來(lái)，在一定的時(shí)間段內(nèi)，進(jìn)行對(duì)比分析，看看停留的時(shí)間是不是增加了，來(lái)的次數(shù)是不是增多了，這樣可以判斷出網(wǎng)站權(quán)重是上升還是下降。

當(dāng)然可以從日志里邊看出的SEO指導(dǎo)數(shù)據(jù)還有很多，這里我暫時(shí)辦列舉出這么多，希望能夠起到一個(gè)拋磚引玉的作用，大家可以往下思考，進(jìn)行延申，在平時(shí)的SEO數(shù)據(jù)分析工作中，一定要養(yǎng)成分析日志的習(xí)慣，平時(shí)如果有時(shí)間，可以多看看日志文件，例如可以去大概的看下搜索引擎蜘蛛在你頁(yè)面上的抓取軌跡，看看有什么規(guī)律，這對(duì)你日后的SEO工作都非常用幫助的。以上內(nèi)容由www.jieyitongcy.com 捷易通自動(dòng)充值軟件首發(fā)，轉(zhuǎn)載請(qǐng)保留網(wǎng)址，謝謝！

標(biāo)簽： 搜索引擎日志分析 nofollow標(biāo)簽 搜索引擎蜘蛛 

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請(qǐng)聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請(qǐng)與原作者聯(lián)系。