大家可能比较关心爬虫来过你的网站没有，以及什么时候来过，我查阅了一下，始终没有找到一个好的方法来查看。后来注册了feedsky后，发现feedsky的实时统计额外实现了这个功能，可能开发者的初衷不是用了查看爬虫，我歪打正着的把它用来查看爬虫了。
图片我截的不是太完整，后面可以清楚的看到百度的爬虫google的爬虫几点几分来的，国人的软件高手也少呀，怎么就没有发明一个查看爬虫的工具呀，好像google的网站管理员也可以爬虫的到来，可惜不太会操作。
可能还有更好的发现爬虫的办法，不过我还没有发现，暂时先用feedsky提供的统计功能吧，虽然只能查看最近15次的，但对新手来说，也起到了参考的作用！
转载请注明文章转载自：80博客 [http://www.bk80.com]
本文链接地址：如何知道爬虫来过你的网站，feedsky又一强大功能
图片看不清楚啊、 顶一下先，期待回复哦
[回复]
80博客 回复:
1月 25th, 2011 at 23:48
图截的还算清楚呀！呵呵！
[回复]
如果使用网站统计呢？ 如何看出爬虫来过
[回复]