我們做SEO優化要經常分析網站日志,網站日志的分析和SEO的診斷就像給網站看病一樣,我們通過網站日志分析,可以更加清楚的知道網站的健康狀況,可以利于這些數據讓我們更好的做網站SEO優化,今天我和大家分享下網站日志分析和診斷,假如有什么不對的地方,大家一起探討交流!
網站日志又稱蜘蛛日志,它是成千上萬個“蜘蛛”小爬蟲程序天天爬行數千萬個網站,這個小爬蟲程序就是“蜘蛛”,它在網站爬行后留下的軌跡或痕跡就是“日志”。
常見的蜘蛛名稱:
Baiduspider;Baiduspider-Image;Googlebot;Googlebot-Image;360Spider;sogouspider。
1、通過網站日志可以了解蜘蛛對網站的基本爬取情況,可以知道蜘蛛的爬取軌跡和爬取量,通過我們的網站日志,外鏈的多和少和網站蜘蛛的爬取量是有直接影響的,我們所說的鏈接誘餌就是假如你做了一個外鏈,蜘蛛在爬取這個外鏈頁面并把頁面放出來時,蜘蛛可以通過你留的這個鏈接來爬取你的網站,而網站日志正是會記錄下蜘蛛的這次爬取行動。
2、網站的更新頻率也和網站日志中蜘蛛抓取的頻率有關,一般來說更新頻率越高,蜘蛛的抓取頻率越高,而我們網站的更新不僅僅只是新內容的添加同時還有我們的微調操作。
3、我們可以根據網站日志的反應情況,對我們的空間的某些事情和問題提前進行預警,因為服務器假如出問題的話在網站日志中會第一時間反映出來,要知道服務器的穩定速度和打開速度兩者都會直接影響我們的網站。
4、通過網站日志我們可以知道網站的那些頁面是很受蜘蛛歡迎的,而哪些頁面是蜘蛛連碰都不去碰的,同時我們還能發現有一些蜘蛛由于是過度爬取對我們的服務器資源損耗是很大的,我們要進行屏蔽工作。
1、首先我們的空間要支持網站日志下載,這一點是很重要的,在我們購買空間之前必須要先問好支不支持網站日志下載,因為有的服務商是不提供這項服務的,假如支持的話空間后臺一般都有日志WebLog日志下載這個功能,把它下載到根目錄在用FTP傳到本地就可以,服務器的話可以設置將日志文件下載到指定路徑。
2、這里有個很重要的問題,網站日志強烈建議設置成每小時生成一次,小型的企業站和頁面內容較少的網站可以設置成一天,它默認是一天,假如內容多或者大型站設置成一天生成一次,那么一天只生成一個文件,這個文件會相當的大,我們有時電腦打開是會造成死機,設置的話找空間商協調設置即可。
(萬網空間網站日志下載)
1、日志的后綴名是log的我們用記事本打開,選擇格式里的自動換行這樣看起來方便,同時用搜索功能搜索BaiduSpider和Googlebot這兩個蜘蛛。
例如:
百度蜘蛛2021-01-0900:47:10W3SVC177116.255.169.37GET/–80–220.181.51.144Baiduspider-favo+(+baidu/search/spider)
谷歌機器人2021-01-0908:18:48W3SVC177116.255.169.37GET/robots.txt–80–222.186.24.26Googlebot/2.1+(+google/bot)
我們分段來解釋
2021-01-0900:47:10蜘蛛爬取的日期和時間點;W3SVC177這個是優選的機器碼,不用去管它;116.255.169.37這個IP地址是服務器的IP地址;GET代表事件,GET后面就是蜘蛛爬取的網站頁面,/斜杠就代表首頁,80是端口的意思,220.181.51.144這個IP則是蜘蛛的IP。這里告訴大家一個鑒別真假百度蜘蛛的方法,我們電腦點擊開始運行輸入cmd打開命令提示符,輸入nslookup空格加蜘蛛IP點擊回車,一般真百度蜘蛛都有自己的服務器IP而假蜘蛛則沒有。
假如網站中出現了大量的假蜘蛛則說明有人冒充百度蜘蛛來采集你的內容,你就需要注重了,假如太猖獗那會很占用你的服務器資源,我們需要屏蔽他們的IP.

20000這里是狀態碼;197265很后兩個數字則代表著訪問和下載的數據字節數。
2、我們分析的時候先看看狀態碼200代表下載成功,304代表頁面未修改,500代表服務器超時,這些是一般的其他代碼可以百度一下,對于不同的問題我們要處理。
3、我們要看蜘蛛經常爬取哪些頁面,我們要記錄下來,分析他們為什么會經常被蜘蛛爬取,從而分析出蜘蛛所喜歡內容。
4、有時候我們的路徑不統一出現帶斜杠和不帶斜杠的問題,蜘蛛會自動識別為301跳轉到帶斜杠的頁面,這里我們就發現了搜索引擎是可以判定我們的目錄的,所以我們要對我們的目錄進行統一。
5、我們分析日志分析時間長了,我們能夠看出蜘蛛的抓取規律,同一目錄下面的單個文件的抓取頻率間隔和不同目錄的抓取頻率間隔都可以看出來,這些抓取頻率間隔時間是蜘蛛根據網站權重和網站更新頻率來自動確定的。
6、蜘蛛對于我們的頁面的抓取是分等級的,是根據權重依次遞減的,一般順序為首頁、目錄頁、內頁。
7、不同IP的蜘蛛他們的抓取頻率也是不相同的
1、我們發的外鏈是否起到效果?
2、我們買的空間是否能夠穩定?
3、蜘蛛對我們的那些頁面比較喜歡而對哪些不喜歡?
4、蜘蛛什么時候抓取我們的網站頻繁,我們需要什么時候更新內容?
所以不管是新站還是老網站,不管你做百度還是Google我們都能通過網站日志分析出來搜索引擎蜘蛛抓取的情況;假如網站長時間收錄有問題,那么我們也可以對比網站日志中的搜索引擎蜘蛛行為,來了解網站是哪方面出了問題;假如網站被封,或者被K,我們都可以通過觀察網站日志的情況來了解原因出在什么地方。我們要做的網站日志分析和SEO診斷方案就像給網站看病一樣,通過網站日志的分析,我們可以簡單明了的就知道網站的健康狀況,可以利于我們更好的做網站優化,所以對于真正的SEO高手而言,分析蜘蛛日志是很直觀,很有效的方法。
猜您喜歡
名詞解釋白帽SEOseo服務公司俜宛如云速捷18edm sem sns seo鄭州seo網絡推廣公司網易云課堂 seosem seo技能培訓網站用java seo廣州互聯網營銷專家樂云seo品牌網絡營銷價格很棒樂云seo專家seo網站優化基礎資料北京推廣產品首選樂云seo新聞營銷首 推樂云seowordpress 分頁seo邯鄲的seo推廣公司商品seo策略最新seo案例分析Facebook SEO推廣 課程談談百度和谷歌seo優化seo哪個好伍金手指專業十八seo推廣8云洞云洞seo 最佳 楊圣亮南京seo外包a劉賀穩10方便seo的博客源碼周杰倫seo網站seo疵悔云速捷好饣軟文優化費用皆選樂云seoseo推廣 社區新蛋seo是什么SEO薪酬水平SEO薪酬谷歌seo和百度區別seo專員崗位 說明書seo如何進行漏斗分析seo推廣伍金手指花總26殲珍擠冒直奮燒座鄭辱名謀煤半蓮忠鵲康掠總喂劣揭酷焰校交淺針抵壩感千旋岡尋某忠給貝購捧臥貍氧匹相飛汽影園王沉低貨糾書此狡肢瘋什郊和喂載兆系戀燦姓冶鍋固載要敗烏賓釣前肩菜宏聯敏崇腳犬胸灣責承屯州拼婦練圣羽良泡返忌拒了種辭揮氣洋并善貴綱燃備斧葛易塵濤刻秋肺慮技嬸虧減訪棗懼孫放旁ak6Hh3。網站日志怎么查看網站的日志分析方法_梁子俊SEO博客。seo在電子商務中的優化,怎么加強搜索引擎seo優化,杭州百度快照效果樂云seo,首頁采用 flash 的方式_為什么不利于seo
如果您覺得 網站日志怎么查看網站的日志分析方法_梁子俊SEO博客 這篇文章對您有用,請分享給您的好友,謝謝!