百度收录页面放出来的蜘蛛应该是有等级划分的，比如你网站被百度认为越好是一个类蜘蛛抓取，你网站被认为是一般是另一个类别的蜘蛛去抓取。搜索引擎希望的是收录有用有意义的内容，但信息量又需要大。因此抓取蜘蛛也肯定是分了等级的。
标签-百度蜘蛛
...
前段时间，新浪博客屏蔽百度蜘蛛的事情闹的沸沸扬扬，很多站长发现，百度几乎不收录新浪博客了，再加上一些大型网站上散播的新浪屏蔽百度蜘蛛的消息，致使很多站长放弃了新浪博客，放弃了在新浪辛辛苦苦养的博客外链资源。
9i57
杰夫：做简单、真实的自己