ASP网站蜘蛛爬行日志记录插件源码免费版,程序共3个文件:botdb.mdb数据库文件、botconn.asp爬行记录调用文件、botlog.asp爬行。
源码使用方法
日志查看文件。
正常情况下,将3个文件放置到您网站的根目录下。然后在您的ASP网站要
监控爬行的页面源代码中最底部加入<!–#include file=”botconn.asp”–>
即可监控页面的蜘蛛爬行情况
监控程序要与你监控的页面在同目录下。或者懂程序的人自行更改程序路径。
如果监控全站页面,一般在你的网站系统根目录下的conn.asp的最底部加入
<!–#include file=”botconn.asp”–>即可。如果没有conn.asp说明您的网
站调用数据库的文件不是conn.asp,请咨询您主站系统的系统开发商询问数
据库调用文件是哪个。
然后通过您的网址如:http://www.xxx.com/botlog.asp 进行访问查看蜘蛛
爬行日志情况。
另外,本插件针对URL伪静态重写,提供了两种获取蜘蛛爬行页面URL的方法。
具体可以打开botconn.asp查找ScriptName选择你需要的爬行记录URL的形式。
伪静态页面只要把ScriptName前面的“’”注释符号去掉就可以了。
v1.0 20170914更新日志
修正一处问题,爬行记录的问题。