更新日志
20170914版本:
修正一处问题,爬行记录的问题。
程序共3个文件:
botdb.mdb数据库文件、botconn.asp爬行记录调用文件、botlog.asp爬行日志查看文件。
正常情况下,将3个文件放置到您网站的根目录下。然后在您的ASP网站要监控爬行的页面源代码中最底部加入即可监控页面的蜘蛛爬行情况
监控程序要与你监控的页面在同目录下。或者懂程序的人自行更改程序路径。
如果监控全站页面,一般在你的网站系统根目录下的conn.asp的最底部加入即可。如果没有conn.asp说明您的网站调用数据库的文件不是conn.asp,请咨询您主站系统的系统开发商询问数据库调用文件是哪个。
然后通过您的网址如:http://www.xxx.com/botlog.asp 进行访问查看蜘蛛爬行日志情况。
另外,本插件针对URL伪静态重写,提供了两种获取蜘蛛爬行页面URL的方法。具体可以打开botconn.asp查找ScriptName选择你需要的爬行记录URL的形式。伪静态页面只要把ScriptName前面的“’”注释符号去掉就可以了。