近日围绕在Robots协议的话题成了互联网的热点。百度与360的Robots之争，成为舆论以及网民的谈资。有互联网资深人士认为，合理使用Robots协议对互联网和互联网经济的发展都具有积极意义。但是，滥用Robots协议或者利用这一协议排斥竞争对手，建立竞争壁垒，受害的是用户。

Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（ Protocol），网站通过Robots协议告诉搜索引擎怎样更高效的索引到结果页，并提供给用户。据有关人士介绍：Robots协议是网站指导爬虫的善意的提示性TXT文件，为爬虫做出提示。不是法规，不是标准，也不是合约，不存在违反与不违反的问题。

虽然Robots协议不具有法律效益，但由于该协议可防止搜索引擎抓取无效信息而造成效率低下，也防止搜索引擎的无限抓取会影响网站的服务质量，因此该协议被各大互联网公司普遍采用。然而普遍采用并不意味着善用，一些互联网巨头将Robots协议作为行业门槛，竞争对手的障碍，滥用协议，造成了一些不良影响。

其实，滥用Robots协议，首先受到影响的并不是企业，而是网民。如果搜索巨头禁止其他新兴搜索引擎抓取自身内容，那么当网民尝试搜索自己想要的内容时，如果使用其它搜索引擎就无法获得完整的结果，智能选择巨头的产品，这违背了用户的基本意志，忽视了用户的选择权，增加了网民的时间成本，而且与互联网产品开放的初衷相违背。

另一方面，由于搜索巨头通过滥用Robots实现对内容的控制，进而控制网民，搜索巨头可以利用这种控制力操纵搜索结果，甚至引导舆论。有评论人表示，“搜索巨头可为所欲为任意操纵搜索结果，对竞争对手进行道德谴责、而一般的舆论批评对巨头无效，只有竞争打破垄断才会让消费者和行业获益”

专家认为，搜索市场的主导地位，控制互联网优质内容，不让其他搜索引擎抓取，进行不公平竞争的垄断行为。既违背了Robots协议的初衷，也违背了互联网开放、分享的精神。后果是非常可怕的，影响也是深远的。

据悉，双方的诉讼案于16日在北京市第一中级人民法院公开审理，双方在法庭上就百度内容版权归属、Robots协议是否具备法律效应等问题进行了辩论。另外，360诉百度“强制跳转”不正当竞争案也将于近日在北京市最高人民法院开庭，“3B大战”进入激烈的诉讼阶段。