APACHE服务器配置日志记录蜘蛛爬行记录

小马哥

APACHE服务器配置默认是不会记录蜘蛛爬行的，可以通过下面两种方法中的任何一种来配置让日志记录蜘蛛爬行：

在 httpd.conf 中找到这段代码

1. CustomLog logs/access.log common

复制代码

这个就是APACHE默认的状态，无法看到搜索引擎爬行网站的记录

修改方式1：将那段代码改成：

1. CustomLog logs/access.log combined

复制代码

修改方式2：按日期记录日志（避免日志文件过大），将那段代码改成：

1. CustomLog   "|bin/rotatelogs.exe   -l   logs/access%Y-%m-%d.log   86400"   combined

复制代码

(这种方法有个坏处，进程里会出现多个rotelogs.exe)

修改后重启APACHE服务，查看LOG文件，就可以看到蜘蛛爬行的记录了。