如何查看网站今天昨天蜘蛛爬行过的痕迹

7651662

如何查看网站今天昨天蜘蛛爬行过的痕迹，这个号称是最基础的东西，我缺到现在
才知道，真的悲剧，半路出家的悲惨！经过我仔细的查找和耐心的询问，终于弄懂
了！
首先我们要到网站空间的控制面板里面找到下载访问日志一栏，去下载，提示：你
第二天几点去网站找前一天的访问记录，并下载下来。我这个是看一次弄一次，好
像可以设置一天一次，不过要定期清理，我这个没有。
然后等第二天去空间log文件夹，把日志记事本下载下来，在去百度下载查看ISS日
志工具，基本上大体就这样。
我来说一下我的2011.12.18号的蜘蛛爬行痕迹。
#Software: Microsoft Log Parser
#Version: 1.0
#Date: 2011-12-19 00:15:02
#Fields: LogFilename RecordNumber ComputerName SiteID DateTime
ClientIpAddress ServerIpAddress ServerPort Method ProtocolVersion
ProtocolStatus SubStatus TimeTaken BytesSent BytesReceived Win32Status
UriStem UriQuery UserName
d:iislogW3SVCra111218.ibl 48179 WIN2K3CHINESE 35340000 2011-12-18
01:30:13 66.249.68.107 174.139.27.139 80 GET HTTP/1.1 304 0 78 215 288 0
/a/14.html - -
d:iislogW3SVCra111218.ibl 66537 WIN2K3CHINESE 35340000 2011-12-18
01:53:15 120.32.217.113 174.139.27.139 80 GET HTTP/1.1 200 0 1828 9526
315 0 /index.php - -
剪切一段分析一下：
d:iislogW3SVCra111218.ibl 66537 WIN2K3CHINESE 35340000 2011-12-18
01:53:15 120.32.217.113 174.139.27.139 80 GET HTTP/1.1 200 0 1828 9526
315 0 /index.php - -
d:iislogW3SVCra111218.ibl 爬行地址
2011-12-18 01:53:15 是时间
120.32.217.113 蜘蛛IP
174.139.27.139 网站空间IP

4样中主要就是看蜘蛛IP，是不是百度IP，百度IP一天来几次。
本文由: http://www.qhyquan.com/ 发布！转载请注明！！