蜘蛛爬虫跟踪器ASP+PHP和301重定向实现方法

红海

蜘蛛爬虫跟踪器ASP PHP和301重定向实现方.rar(10.95 KB, 下载次数: 27)
asp抓蜘蛛的代码，生成日志文件，仅2.34K。

使用方法：
将本代码加入要统计的文件中，其中路径改为你的路径

蜘蛛访问后系统会生成日志文件放在：/目录log/data/下。
察看日志请访问：http://网址/目录/log/log.asp
可以识别：Google蜘蛛B，Google蜘蛛A，百度蜘蛛，微软蜘蛛，inktomi蜘蛛，openbot蜘蛛，Alexa蜘蛛，yahoo蜘蛛，Survey蜘蛛等。

文件收集于网络。经过使用很好。
======================================================
301重定向（也叫301转向，301跳转）对网站优化所起的作用是不可忽视的，尤其是针对SE（搜索引擎）处理网站页面权重的时候，更加显得重要。网站 换了新域名，默认首页需要跳转等，从SEO角度来说，我们都建议使用301重定向，而不是JS跳转或META REFRESH或302转向，这些很 　　301重定向（也叫301转向，301跳转）对网站优化所起的作用是不可忽视的，尤其是针对SE（搜索引擎）处理网站页面权重的时候，更加显得重要。网站 换了新域名，默认首页需要跳转等，从SEO角度来说，我们都建议使用301重定向，而不是JS跳转或META REFRESH或302转向，这些很容易引来SE的惩罚。

什么是301重定向呢？

301重定向是当用户或搜索引擎向网站服务器发出浏览请求时，服务器返回的HTTP数据流中头信息(header)中的状态码的一种，表示本网页永久性转移到另一个地址。其它常见的状态码还包括，200表示一切正常，404网页找不到，302暂时转向，等等。

为什么要用301转向？

网址转向方法主要包括：301转向，302转向，javascript转向，PHP/ASP/CGI转向，META REFRESH网页META刷新等。302转向可能会有URL规范化问题。其它方法都是常用的作弊手法，当然不是说不可以正当地用，方法本身没有错，但被 作弊者用多了，搜索引擎对这些可疑的转向都很敏感。何必冒险呢。

关于301转向和网址规范化问题，大家可以去阅读下ZAC写的文章。本文，仅仅讨论在ASP环境下，如何设置301重定向问题；其他语言亦可参考。