|
![]() |
现在很多网友问我怎样看搜索引擎蜘蛛能否来过我的网站,我告诉他们要去看网站访问日志,但是很多朋友都是新手不知道怎样查看服务器访问日志的,而访问日志对于网站优化者来说里边包含了很多有价值的信息,怎样才能直观易懂的记录各大搜索引擎蜘蛛爬去记录呢?很多cms有专门的记录工具或者者插件,但是织梦本身的功能中不包含这个功能,所以也就有牛人开发出了这样一个工具,可以用来详细的记录各大搜索引擎蜘蛛的访问记录,方便优化人员根据日志及时对网站做出调整,今天我就整理了下这个工具,希望有需要的朋友下载使用。
蜘蛛爬行痕迹记录工具详情:
1.后端可以自由增加修改和删除各大搜索蜘蛛
2.查看蜘蛛爬行的详细信息(最后来访时间,ip地址,被访地址)
分析说明:蜘蛛名称:百度
最后来访时间:2020-12-08 15:49:33
IP地址:222.88.6.142
被访地址:地址省略(就是你网站中的页面URL,被蜘蛛访问的。)
表达的意思为:IP为222.88.6.142的百度蜘蛛在2019-01-16 15:49:33对的 网页地址省略/ 网页进行访问。
3.分别按(日、周、月、年)统计了各大搜索爬虫对网站的访问次数
4.详细记录蜘蛛访问的痕迹, 蜘蛛名称 最后来访时间 IP地址 被访地址
5.对每个蜘蛛的访问总数做了统计
6.采用缓存技术对增加的蜘蛛进行缓存,以达到更快的速度
安装见压缩包里说明
© 版权声明
文章版权归作者所有,未经允许请勿转载。如内容涉嫌侵权,请在本页底部进入<联系我们>进行举报投诉!
THE END
暂无评论内容