如果你使用的是虚拟主机的话,主机管理面板里面一般都有启用IIS日志的选项,在里面打开IIS 日志。一般IIS 日志存放在你的ftp 账户的根目录下并且以 log×××等字样命名的文件夹下面。IIS 日志为.log 尾缀的文本文件,下载下来,然后查找带有 Baiduspider+字样的记录行,该行即为百度蜘蛛爬行的痕迹。另外还有 google的是 googlebot等等,自己可以研究一下。
如果是自己的独立服务器,打开IIS,在站点标签下面有个“启用日志记录”选中,然后点属性指定日志保存路径即可。