网站日志每天都要分析吗?网站日志怎么分析

网站日志每天都要分析吗?网站日志怎么分析

时间:2018-10-24 分享到:

  网站日志也叫IIS日志,这个日志记录了搜索引擎蜘蛛爬去我们网站的情况,根据日志我们可以判断出搜索引擎蜘蛛每天来我们网站的次数、时间、爬取的页面和返回的HTTP状态码。如果你工作不是很忙就可以每天分析一次日志,也可以定期分析,如一个星期或者两到三天一次都是可以的,如果你的分析时间周期长的话分析起来越吃力,分析网站日志对网站的收入以及蜘蛛抓取非常有帮助。下面分三个步骤来了解和分析网站日志。

网站日志每天都要分析吗?网站日志怎么分析

  一、各大搜索引擎的蜘蛛名称:

  百度(Baidu)爬虫名称(Baiduspider)

  谷歌(Google)爬虫名称(Googlebot)

  雅虎(Yahoo)爬虫名称(Yahoo Slurp)

  有道(Yodao)蜘蛛名称(YodaoBot)

  搜狗(sogou)蜘蛛名称(sogou spider)

  MSN的蜘蛛名称:msnbot

  二、IIS日志手动分析:

  案例日志:61.135.168.22 – – [11/Jan/2009:04:02:45 +0800] “GET /SEOjiaocheng/139.html HTTP/1.1” 200 8450 “-” “Baiduspider(+http://www.baidu.com/search/spider.htm)”

  分析:

  1、61.135.168.22 是访问了是服务器IP为这个的网站;

  2、11/Jan/2009:04:02:45 表示蜘蛛爬行时间;

  3、GET /SEOjiaocheng/139.html HTTP,表示蜘蛛抓取了这个页面;

  4、200 状态码表示蜘蛛抓取页面成功;404表示蜘蛛抓取页面失败;

  5、8450 表示此次抓取了8450个字节;

  6、Baiduspider(+http://www.baidu.com/search/spider.htm)表示百度蜘蛛的名称。

  三、光年日志分析工具

  这个工具非常好用,而且比人工省时省力,佛系站长强烈推荐大家使用这款工具。

  网站的日志,我们每天都要去看,了解蜘蛛来我们网站抓取页面的情况,那些页面是蜘蛛抓取不到的,为什么抓取不到?这些都可以通过网站日志分析,查找原因,解决问题。感觉大家观看,我是佛系站长,排名一切随缘!

版权所有:http://www.foxizhanzhang.com 转载请注明出处