1、可以知道每个IP 访问的次数，判断它是否：
1、扫你漏洞的
2、入侵，渗透你的
2、可以知道每个蜘蛛 访问的路径。
1、扫你漏洞的
2、入侵，渗透你的
3、根据IP 可以知道是否是假冒的搜索引擎知道
3、可以导出该IP和该蜘蛛爬行过的日志
注：因为逐条分析，所以可能有点慢。多等等 ！