一、可以看出網站頁面有哪些搜索引擎的蜘蛛抓取
提醒：網站的日志里面也有可能會出現一些其它私人開發的抓取器所抓取，由此我們可能會發現一些奇怪的蜘蛛抓取痕跡。另外百度也有屬于自己的匿名蜘蛛，我們也要注意區分注意。
二、可以統計網站目錄蜘蛛抓取的總量
通過抓取總量的分析可以對比出網站哪個目錄更受搜索引擎的關注，一般來說蜘蛛抓取越頻繁的目錄，site網站此目錄的排名會相對靠前，我們也可通過目錄的蜘蛛訪問量來適當調整目錄的結構，對于那些抓取壓力較大但是不怎么重要的目錄也可適當縮減鏈接入口，以免阻礙給其它重要目錄的抓取。
三、網站頁面的抓取。
可以從中看出哪個頁面蜘蛛是否抓取了一些沒有被收錄價值的頁面，或者老是重復的抓取了這些頁面等，那么同理要先采取措施予以頻閉，要么是運用到nofollow標簽，文章排版、關鍵詞組合、發布機,要么是robots文件等，這樣就會降低因為搜索引擎抓取到大量相關性低或者質量度差的頁面而影響到頁面的權重傳遞這樣的不利影響。
四、蜘蛛平均抓取頁面的次數、頁面平均停留時間以及抓取的數量。
從以上的分析能夠很清晰的看出蜘蛛是否頻繁關注自己的網站，而且抓取的頁面越多，深度越足也能反映出網站的活躍度高，而且在停留的時間上面也能初步看出網站的頁面和文章是否新穎或者原創，這是頁面質量度的一個體現。
五、可以一覽蜘蛛方面各網頁的狀態碼
狀態碼是網站日志里面最重要的一個方面了，這是蜘蛛對于網站頁面狀態最直觀的反映，從這些狀態碼中可以看出更多詳細的信息，小賽前面有一篇文章對各種蜘蛛狀態碼上面給出了非常詳細的介紹。
光年日志分析工具界面
六、了解網站日志蜘蛛的來訪時間
對網站日常日志分析總結中，可以很直觀的看出每天具體是哪個時間段是蜘蛛訪問的高峰時期，我們為了迎合搜索引擎，也可以相應調整網站的更新時間，爭取在蜘蛛活躍度最高的時間段更新文章，這樣對自己網站的收錄會有非常大的幫助，甚至還有可能達到秒收的效果！
上一篇：seo博客有哪些用處和目的
下一篇：百度經常更新是為了什么？
如果您覺得 網站每天都能抓取到哪些重要信息 這篇文章對您有用，請分享給您的好友，謝謝
文章地址：http://www.brucezhang.com/article/seo/3337.html
文章地址：http://www.brucezhang.com/article/seo/3337.html
