找回密码
 注册账户
查看: 246|回复: 0

新浪博客屏蔽百度蜘蛛 百度将无法抓取

[复制链接]
业界达人 发表于 2010-8-14 08:30:03 | 显示全部楼层 |阅读模式
<P>  站长之家(chinaz.com)8月13日消息:今日,站长之家用户wxg8899通过新浪博客robots.txt(http://blog.sina.com.cn/robots.txt)文件发现,新浪已经在robots.txt文件中设置相关命令,屏蔽百度的蜘蛛爬虫,禁止百度蜘蛛获取网页信息。这也意味着,通过新浪博客获取百度外链的方式将不可取了。</P><P>  长期以来新浪博客因其权重高、收录快的特点,一直被许多站长视为增加网站外链的宝地。新浪博客一度成为了外链推广基地,被站长作为增加外链的最好途径之一。不过这也导致了新浪博客存在大量的软文和垃圾内容。而新浪博客屏蔽百度蜘蛛将有利于改善这一问题,减少无价值内容的产生。</P>
您需要登录后才可以回帖 登录 | 注册账户

本版积分规则

存档|黑屋|手机|网络实验室 本站服务器由美国合租以及IDCLayer国际数据提供!!!

GMT+8, 2026-6-19 19:18 , Processed in 0.011088 second(s), 9 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表