通過(guò)對(duì)網(wǎng)站日志的分析，我們可以很好的判斷我們的網(wǎng)站的健康程度，并且還可以看到蜘蛛抓取的記錄以及用戶的一些行為記錄，這樣數(shù)據(jù)對(duì)于我們來(lái)講無(wú)疑是提升網(wǎng)站的一個(gè)關(guān)鍵，可以時(shí)刻的讓我們看到網(wǎng)站的不足之處，從而進(jìn)行改正。然而今天小編與大家分享的主要是蜘蛛抓取的行為，希望對(duì)各位站長(zhǎng)有所幫助。
(一)蜘蛛訪問(wèn)的次數(shù)、停留時(shí)間以及抓取的數(shù)量。
從小標(biāo)題中的三個(gè)小編提到的數(shù)據(jù)我們可以了解到下面幾點(diǎn)信息：
1、平均每次抓取頁(yè)面數(shù)=總抓取量/訪問(wèn)次數(shù)
2、單頁(yè)抓取停留=每次停留/每次抓取
3、平均每次停留時(shí)間=總停留時(shí)間/訪問(wèn)次數(shù)
以上三點(diǎn)載自百度百科。
從這些數(shù)據(jù)中我們可以很好的看出百度蜘蛛在我們網(wǎng)站上的活躍度、是否親和，以及我們網(wǎng)站內(nèi)容抓取的深度等等有效的數(shù)據(jù)。當(dāng)我們網(wǎng)站中總的訪問(wèn)頻次、蜘蛛停留的時(shí)間，以及網(wǎng)站抓取程度的是否高，從這些都是可以看出我們網(wǎng)站是否受到蜘蛛的喜愛(ài)。并且在我們單頁(yè)面的蜘蛛停留時(shí)間的長(zhǎng)短也可以看出我們的文章頁(yè)面是否受蜘蛛的喜愛(ài)。
小提示：如果你想要長(zhǎng)期發(fā)展一個(gè)網(wǎng)站的話，小編建議各位定期的整理出網(wǎng)站數(shù)據(jù)報(bào)表，這樣對(duì)我們網(wǎng)站的發(fā)展也會(huì)有著很好的幫助。
(二)網(wǎng)站目錄蜘蛛抓取的統(tǒng)計(jì)。
通過(guò)網(wǎng)站日志的分析，可以很好的看出我們的哪些目錄比較受蜘蛛的喜愛(ài)，蜘蛛經(jīng)常抓取收錄，并且給予的排名權(quán)重狀況。并且我們可以通過(guò)這些數(shù)據(jù)能夠發(fā)現(xiàn)很多問(wèn)題，對(duì)于我們想要突出的欄目可以通過(guò)內(nèi)部結(jié)構(gòu)來(lái)進(jìn)行指向，從而有效的增加欄目的權(quán)重和蜘蛛抓取的程度。對(duì)于那些我們不希望蜘蛛抓取的頁(yè)面，也可以進(jìn)行屏蔽。
(三)網(wǎng)站頁(yè)面的抓取。
通過(guò)日常的日志分析統(tǒng)計(jì)中，我們可以看出哪些網(wǎng)站頁(yè)面比較受蜘蛛的喜愛(ài)，并且可以了解到蜘蛛在這些頁(yè)面的抓取行為，例如說(shuō)蜘蛛是否抓取了一些沒(méi)有被收錄價(jià)值的頁(yè)面，或者重復(fù)的抓取了一些頁(yè)面等，大家都知道這樣會(huì)影響到我們網(wǎng)站其他頁(yè)面的權(quán)重傳遞的。就比如說(shuō)小編的網(wǎng)站皮膚欄目通常就要比名字欄目抓取的勤快，收錄健康程度也較好，所以小編現(xiàn)在定期在名字欄目的文章中添加進(jìn)入一些圖片，不僅僅美觀還有效的提升了名字欄目文章的收錄，所以通過(guò)分析，我們可以屏蔽蜘蛛抓取這些沒(méi)有價(jià)值的頁(yè)面，也有效的提高了我們其他頁(yè)面權(quán)重的傳遞，并且學(xué)習(xí)蜘蛛比較喜愛(ài)的頁(yè)面優(yōu)點(diǎn)來(lái)補(bǔ)充其他頁(yè)面的不足。
(四)了解蜘蛛是否訪問(wèn)我們的頁(yè)面以及訪問(wèn)頁(yè)面的狀態(tài)代碼。
很多朋友的網(wǎng)站主頁(yè)快照經(jīng)常不正常，網(wǎng)站發(fā)布的文章也經(jīng)常不收錄，面對(duì)這樣的情況我們都會(huì)想蜘蛛有沒(méi)有到我們的網(wǎng)站抓取。這時(shí)候我們也可以通過(guò)網(wǎng)站日志來(lái)看是否有蜘蛛IP的記錄就可以了解蜘蛛是否來(lái)爬行我們的網(wǎng)站，從而判斷是否是我們網(wǎng)站質(zhì)量的原因?qū)е虏皇珍�。并且也可以看出蜘蛛訪問(wèn)我們網(wǎng)站頁(yè)面的狀態(tài)代碼，例如說(shuō)301、503、403等，當(dāng)出現(xiàn)這樣情況的時(shí)候，我們盡早做處理，以免成為網(wǎng)站降權(quán)的隱患。
(五)了解蜘蛛抓取的時(shí)間段。
通過(guò)日常日志分析總結(jié)中，你會(huì)很奇妙的發(fā)現(xiàn)一件事，那就是蜘蛛會(huì)在每天的一個(gè)特定時(shí)間內(nèi)在網(wǎng)站爬行抓取的很活躍，當(dāng)我們了解到這樣的情況，我們就可以再特定的時(shí)間去更新網(wǎng)站內(nèi)容，這個(gè)可以更加有效的讓蜘蛛抓取我們網(wǎng)站內(nèi)容，從而達(dá)到一個(gè)秒收的效果。
總結(jié)：如果一個(gè)網(wǎng)站想要長(zhǎng)久發(fā)展的話，站長(zhǎng)們一定要學(xué)會(huì)分析網(wǎng)站日志，從而了解網(wǎng)站每天的健康狀況，并且發(fā)現(xiàn)異常情況的時(shí)候即使改正，這樣不僅僅對(duì)網(wǎng)站有很大的幫助，還有效的防止網(wǎng)站因?yàn)檫@些異常引發(fā)的降權(quán)、被K等現(xiàn)象。
