我們應(yīng)該經(jīng)常分析網(wǎng)站日志,當(dāng)我們做搜索引擎優(yōu)化。對(duì)網(wǎng)站日志的分析和診斷就像在網(wǎng)站上看醫(yī)生一樣。通過對(duì)網(wǎng)站日志的分析,我們可以簡(jiǎn)要了解網(wǎng)站的健康狀況。它可以幫助我們更好的優(yōu)化網(wǎng)站搜索引擎優(yōu)化。今天,我們將與大家分享對(duì)網(wǎng)站日志的分析和診斷
Weblog,也稱為蜘蛛日志,是數(shù)萬(wàn)個(gè)“蜘蛛”爬蟲,每天爬行數(shù)千萬(wàn)個(gè)網(wǎng)站。這個(gè)小爬蟲程序是“蜘蛛”,爬蟲留下的軌跡是“l(fā)og”
常見蜘蛛名稱:
百度蜘蛛;百度派珀形象;谷歌機(jī)器人;谷歌機(jī)器人形象;360個(gè)蜘蛛;sogouspider。
首先,網(wǎng)站日志的重要作用
1。通過網(wǎng)站日志,我們可以了解蜘蛛在網(wǎng)站上爬行的基本情況,了解蜘蛛的爬行軌跡和數(shù)量。通過我們的網(wǎng)站日志,外部鏈的數(shù)量和數(shù)量以及蜘蛛在網(wǎng)站上爬行的數(shù)量都有直接的影響。我們所說的鏈?zhǔn)秸T餌是,如果你做一條外鏈,蜘蛛就會(huì)爬行。當(dāng)外部鏈接頁(yè)面發(fā)布時(shí),蜘蛛可以通過你留下的鏈接抓取你的網(wǎng)站,網(wǎng)站日志將記錄蜘蛛的爬行
2。網(wǎng)站的更新頻率也與蜘蛛在網(wǎng)站日志中的爬行頻率有關(guān)。一般來說,更新頻率越高,爬行器爬行的速度就越高。我們網(wǎng)站的更新不僅是新內(nèi)容,也是我們的微調(diào)操作
3。根據(jù)網(wǎng)站日志的響應(yīng),我們可以提醒我們空間中的一些事情和問題,因?yàn)槿绻?wù)器出錯(cuò),它會(huì)在網(wǎng)站日志中多次反映出來。我們應(yīng)該知道,服務(wù)器的穩(wěn)定速度和開放速度將直接影響我們的網(wǎng)站
4。通過網(wǎng)站日志,我們可以知道該網(wǎng)站的哪些頁(yè)面非常受蜘蛛歡迎,哪些頁(yè)面不被蜘蛛觸及。同時(shí),我們也可以發(fā)現(xiàn)一些蜘蛛爬行太多,這是對(duì)我們服務(wù)器資源的巨大損失。我們需要屏蔽工作
2、如何下載日志以及設(shè)置日志時(shí)的注意事項(xiàng)
1。首先,我們的空間應(yīng)該支持網(wǎng)站日志下載,這一點(diǎn)非常重要。在購(gòu)買空間之前,您必須打招呼并支持網(wǎng)站日志下載,因?yàn)榉?wù)提供商不提供此服務(wù)。如果支持,空間后臺(tái)一般具有日志下載功能。要加載到根目錄,使用FTP傳輸?shù)奖镜啬夸洝?梢詫⒎?wù)器設(shè)置為將日志文件下載到指定的路徑
2。這里有一個(gè)重要的問題。網(wǎng)站日志強(qiáng)烈建議將小企業(yè)網(wǎng)站和內(nèi)容較少的網(wǎng)站設(shè)置為一天。默認(rèn)值為一天。如果將更多內(nèi)容或更大的網(wǎng)站設(shè)置為每天生成一個(gè)文件,則每天只生成一個(gè)文件。將生成此文件。它相當(dāng)大。有時(shí)當(dāng)我們打開電腦時(shí),它會(huì)導(dǎo)致崩潰。如果我們?cè)O(shè)置它,我們可以找到一個(gè)空間提供商來協(xié)調(diào)設(shè)置
網(wǎng)站日志分析
1。日志的后綴為log。我們用筆記本打開它,選擇自動(dòng)換行的格式,看起來很方便。同時(shí),我們使用搜索功能搜索百度蜘蛛和谷歌機(jī)器人
例如:
如果網(wǎng)站上有大量假冒蜘蛛,這意味著有人假裝是百度蜘蛛來收集你的內(nèi)容。你需要注意它。如果它太猖獗,就會(huì)占用您的服務(wù)器資源。我們需要保護(hù)他們的知識(shí)產(chǎn)權(quán)。分析時(shí),我們首先查看狀態(tài)代碼。200表示下載成功,304表示頁(yè)面不變,500表示服務(wù)器超時(shí)。這些通常是百度可以使用的其他代碼。我們必須處理不同的問題。我們需要看看爬行器經(jīng)常爬哪些頁(yè)面。我們需要記錄它們并分析為什么它們經(jīng)常被蜘蛛爬行,以便分析蜘蛛喜歡什么
4。有時(shí)我們的路徑是不一致的,有或沒有斜線。可以自動(dòng)識(shí)別十字軸301的斜線。在這里,我們發(fā)現(xiàn)搜索引擎可以判斷我們的目錄,所以我們需要統(tǒng)一我們的目錄
5。我們已經(jīng)分析日志很長(zhǎng)時(shí)間了。我們可以看到蜘蛛爬行的規(guī)則。您可以看到同一目錄中的單個(gè)文件以及不同目錄中的頻率間隔。這些頻率間隔由爬行器根據(jù)網(wǎng)站的權(quán)重和網(wǎng)站更新的頻率自動(dòng)確定
6。爬行器按層次順序爬行我們的頁(yè)面,這將隨著權(quán)重的增加而減少。它們通常按照主頁(yè)、目錄頁(yè)和內(nèi)部頁(yè)
7的順序爬行。不同IP的蜘蛛有不同的捕獲頻率
我們可以從網(wǎng)站日志
1中學(xué)到什么。蜘蛛喜歡哪一頁(yè)
2。蜘蛛什么時(shí)候會(huì)經(jīng)常在我們的網(wǎng)站上爬行,什么時(shí)候我們需要更新我們的內(nèi)容
因此,無論是新網(wǎng)站還是舊網(wǎng)站,無論你是百度還是谷歌,我們都可以通過網(wǎng)站日志分析搜索引擎蜘蛛捕捉到的情況;如果網(wǎng)站存在長(zhǎng)期問題,我們還可以比較搜索引擎蜘蛛在網(wǎng)站日志中的行為,了解網(wǎng)站的問題;如果網(wǎng)站被屏蔽,我們可以。查看網(wǎng)站日志以了解原因。我們想要查看的網(wǎng)站日志的分析和診斷就像為網(wǎng)站看醫(yī)生一樣。通過對(duì)網(wǎng)站日志的分析,我們可以簡(jiǎn)單明了地了解網(wǎng)站的健康狀況,這有助于更好地優(yōu)化網(wǎng)站。因此,對(duì)于真正的SEO,分析蜘蛛日志是非常直觀有效的優(yōu)化方法。