苏苏网赚论坛

 找回密码
 立即注册
查看: 7946|回复: 0

蜘蛛抓取概要分析

[复制链接]
跳转到指定楼层
楼主
发表于 2018-10-25 16:12:55 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
蜘蛛抓取概要分析
  2、网站目录抓取
  网站目录的抓取可以帮助我们看出搜索引擎对于网站内部的目录喜爱程度,而查看百度蜘蛛对于目录的抓取能够发现网站那里的问题更严重,大家可以看出
下图中百度spider对于网站首页的抓取居然一次都没有,而其中tag目录的抓取相对来说就比较多,另外关于网站后台的文件wp-content目录的抓取也比较多,其
他剩下的都是网站内页,可见网站首页出现了问题,这里可以考虑对首页进行外链建设来吸引蜘蛛抓取。
  网站目录抓取
  3、查看用户状态码
  用户状态码可以帮助我们查看用户对于网站网页的动作,但是查看用户状态码发现有大量的404状态码,访问量在351,占比51.486,这是一个非常不正常的
现象,查看这些404页面,完全不是网站内部的页面,甚至还有不少是访问ASP的页面(我的博客是WP程序),猜测有受到一定的攻击。
  用户状态码分析
  简单地分析,可以看出网站的一些问题,并且针对这些问题制定一些简单的应对措施,帮助网站尽快的恢复,这样我们就能够更好更有针对性的做好网站
site不在第一的SEO恢复工作。
热帖推荐
回复

使用道具 举报

广告合作|最大的网赚客中文交流社区!十年老站!

GMT+8, 2024-5-7 09:17 , Processed in 0.171600 second(s), 23 queries , Gzip On.

Powered by Discuz! X3.1 VIP版

© 2012-2022 苏苏网赚论坛 版权所有 | 10年老品牌

快速回复 返回顶部 返回列表