另类404错误

2016-11-8 14:24| 发布者: admin| 查看: 713| 评论: 0

记得互联网刚进入中国时,央视有一栏目是叫做互联网生计大赛,就是把一档子人关起来,只要互联网,看谁能经过它买到自个想要的东西生计下来。其时觉得真不容易,这些人必定是高手。其时就说这是将来的人日子的常态,足不出户就能够使用互联网活下来。现在看来,本来更风趣的是把大家远离互联网,看他们能否活下来。

  进入主题,近段时刻9月底与10月前 很多站长阅历堪比过山车般的持起彼伏,在9月23日的时分,baidu来了一波大更新,很多新站终于是跳出一大有些录入。而合理认为能够快乐的迎候国庆的时分,一大波网站被baidu进行赏罚。baidu的动作是越来越猜不透了。


baidu大更新蜘蛛抓取痕迹


  baidu大更新蜘蛛抓取痕迹


一大波被baidu赏罚的网站正悄然来袭


  一大波被baidu赏罚的网站正悄然来袭

  网站日志作为站长每日必看的东西,假如是简略的检查网站蜘蛛的抓取,这些凭借爱站的东西包就能看出网站是不是受蜘蛛期待了,可是假如要对日志进行具体的剖析,仍是的老老实实的检查日志文件。而最近用爱站东西检查蜘蛛概要剖析的时分,发现baidu蜘蛛总停留时刻简直为0,而baidu蜘蛛拜访次数以及总抓取量却正常,接下来咱们一同研讨下这个疑问:


baidu抓取总停留时刻


  baidu抓取总停留时刻

  每逢网站有啥病痛的时分,最着急的就是站长了,感受这时分谁都靠不住,只能自个去琢磨了。这时分没其他方法,只能先去检查网络日志。不看不知道,一看吓一跳,发现回来的404过错多的简直能上天。



  看到这里的时分,简直吓了一跳,哪里跑出来的过错页面,已然有几万条。等接着往下看的时分发现简直都是同一IP抓取的,到底是何方神圣,能会集的那么厉害。慢慢发现看的时分发现一些baidu的字眼,看到baidu就好办了,先看一下这个IP是不是baidu爬虫的,发现以后如同是baidu云观测的爬虫。



  然后往回想一下之前在baidu站长渠道使用过网站体检,发现体会度太低以后,去baidu云观测设置网站维护,估量是由于这个因素。而回来这些过错的404页面根本都是不存在的页面,而联系baidu云观测能够知道,这应该是baidu云观测的测验蜘蛛,测验网站的安全性,它仿照木马的进犯去抓取网站链接,回来404证明进犯不成功。而很多的404回来会照成baidu蜘蛛的误判,咱们知道蜘蛛兑404是很恶感的,所以触摸一些以后就立刻回头,照成这次的停留时刻根本0。

  好了,困惑在心头的结终于打开了,各位别看如同很轻松的就处理了,其间的辛苦想必只要自个知道,而单纯处理这个疑问都耗费了几天时刻,由于不是每次对网站操作过的工作都能像影片相同过一遍。而这也恰是风趣的当地,除了是有触及违规的网站外,正常的网站出现疑问怎么处理是对一个站长的应战,而怎么处理这份应战就变的适当的风趣了。

<
>
 
QQ在线咨询
售前咨询热线
188-423-88900
售后服务热线
188-423-88900
返回顶部