搜索引擎蜘蛛访问日志文件创建和查看-Powered by 25yicms

   查看搜索引擎蜘蛛访问日志(google蜘蛛的爬行日志，baidu蜘蛛的爬行日志,其它像yahoo,必应等搜索引擎的蜘蛛爬行日志)对我们seo者并不陌生，经常查看搜索引擎蜘蛛访问日志，让我们有效掌握搜索引擎蜘蛛对我们的站点爬行规律，从而分析我们搜索引擎对我们站点的喜欢程度和爬行了那些文件。

   如何创建搜索引擎蜘蛛访问日志文件呢？
   1，对于服务器的的配置：只需在相应网站IIS目录属性的网站属性处启用日志记录，如下图所示：

   生成的文件为每个用户访问网站的访问日志,访问日志文件存放于该站点下的LogFiles文件夹下，每天生成日期.txt的文本文件。

2,对于虚拟主机空间的配置：以25亿企业网站管理系统官方空间为例，我们进入我们所购买的虚拟主机空间的控制面版，如下图所示：

选择主机日志管理进入，进入后就会看到如下图：

   把日志状态设为记录既可。生成的文件为每个用户访问网站的访问日志,日志文件存放于该站点根目录下的LogFiles文件夹下，每天生成日期.txt的文本文件。

    如何查看搜索引擎蜘蛛访问日志文件呢？
    一般生成的日志文件格式如下：
2010-03-03 00:00:16 W3SVC81026034 222.184.119.110 GET /seo/index.html - 80 - 220.181.7.64 Baiduspider+
(+http://www.baidu.com/search/spider.htm) 200 0 0

2010-03-03 00:00:16 //为访问时间
W3SVC81026034 //日志文件存放文件夹
222.184.119.110 //网站服务器IP
/seo/index.html //用户访问的网站页面
80 //端口号
220.181.7.64 Baiduspider+(+http://www.baidu.com/search/spider.htm) //用户访问源IP，如果是搜索引擎访问后面就会有相对应搜索引擎的蜘蛛名称,百度蜘蛛就是：Baiduspider;谷歌蜘蛛就是：Googlebot；Sogou蜘蛛就是：Sogou+web+spider;Soso蜘蛛就是：Sosospider等等。
200 0 0 //访问成功,详细请查看搜索引擎爬行页面后返回的参数检测代码。

    所以如果要查看当天搜索引擎蜘蛛爬行日志，只需要日志文件中搜索蜘蛛名称就是，如我要查看百度蜘蛛当天爬行日志，在日志文件当中搜索Baiduspider就可以查看到蜘蛛爬行的每个网站页面和其返回参数判断此页面的状态。
    作者: SEO技术@ 企业网站管理系统
    原载: 25亿企业网站管理系统
    版权所有。转载时必须以链接形式注明作者和原始出处及本声明。