文章标签 ‘新浪博客’
2010八月13

新浪博客屏蔽了百度蜘蛛的抓取?

今天看到一则消息称新浪博客屏蔽了百度蜘蛛的索引,大致内容如下:

长期以来新浪博客因其高PR、收录快的特点,一直被许多站长视为增加网站外链的宝地。新浪博客一度成为了外链推广基地,被站长作为增加外链的最好途径之一。不过这也导致了新浪博客存在大量的软文和垃圾内容。而新浪博客屏蔽百度蜘蛛将有利于改善这一问题,减少无价值内容的产生。

我看了下新浪博客的ROBOTS.TXT文件,好像确实屏蔽了,上面注明了是 “临时限制对所有目录的禁止抓取
”。

不[......]

继续阅读