这是两个非常不错的批处理文件了,其实说白了就是一个源码!只是把里面的蜘蛛的名字换了一下,相信大家都应该是明白的,每一个搜索引擎的蜘蛛都是不一样的名字的,在你的网站爬一次以后都会留下一个访问的记录的,但是下载回来以后打开一看乱七八糟的的很多东西,都不知道到底该怎么分析!网络上就出现很多教大家如何手动分析网站日志的教程,大家可以自己百度搜索下我就不在本文再提了。当然除去手动分析还有很多牛逼的人有开发各种各样的日志分析软件,但是我也找过很多款但是都只能告诉你今天来了几次,但是并不能告诉你爬了哪些网页?怎么办就开看看下面的给大家提供的批处理文件吧!废话不多说了来看下面的如何使用吧?

1.先下载这2个批处理即可,一个是百度一个是谷歌的其他的搜索引擎蜘蛛会在最后后面教大家如何修改的。下载地址如下:

http://pan.baidu.com/share/link?shareid=107965&uk=3825411059

2.把他解压到某个盘中,不要直接双击运行也不要解压到桌面上运行会报错,解压到比如E盘内;

3.把你网站的日志放到同一个目录里面,比如xxx.com.log,就是这个log文件复制粘贴到同一个目录即可;

4.运行你要检测的蜘蛛,比如运行“百度.bat” 会有一个黑色CMD窗口闪一下不用动,他会自己关闭整理出百度蜘蛛的爬行记录,生成一个zhizhu.txt的文件,就会在里面列举出爬行的日期和时间,还后统计的一共有几次?还有就是在最后统计出爬行的那些页面?

5.如果你要修改为比如360蜘蛛,soso蜘蛛,你右键点击其中一个bat用记事本打开编辑,全部替换掉对应蜘蛛的名称即可。如你打开了百度的批处理,就搜索“baiduspider”,你要替换成雅虎的就下面写“Yahoo Slurp”即可!蜘蛛的名称大家自己百度搜索即可。比如搜索“360搜索引擎蜘蛛名称”就可以知道了。

人太懒了,懒得录制视频和截图了,自己研究下吧!这么简单东西都看不懂怎么弄,就没救了。嘿嘿。