不顾Robots协议？3B大战中的360违规了吗？
2012-09-06 15:14:24   来源：Chinaz   评论：0 点击：

　　8月16日，360搜索上线并成为360网址导航的默认搜索，与业内老大百度正面展开竞争。随着百度的大规模“反制”，一场被业内称为“3B大战”互联网搜索之争随即升级。同时，一个关于Robots协议的技术性话题也浮出水面，而Robots协议对于互联网搜索来说是至关重要的。
　　
　　“360搜索不顾Robots协议肆意抓取百度数据，是一种不遵守互联网基本协议的行为，对全体网民的隐私和安全都会造成威胁，也破坏了网民完整的搜索体验。”8月30日，百度工程师赵明华首先在其微博中发声，继而一些互联网业内人士也发表见解，认为360做搜索就要遵守搜索行业公认的Robots协议，肆意违反规则会引发行业大乱。
　　
　　大学生刘琦每天都会使用百度搜索和360杀毒，他格外关注“3B大战”。“我也看到网上有评论说360违反了Robots协议，可是我并不清楚Robots协议是什么。”刘琦说。
　　
　　资深互联网观察家洪波向记者详细解释了Robots协议。搜索引擎的原理是，通过一种爬虫（Spider）程序，自动搜集互联网上的网页并获取相关信息。基于网络安全与隐私的考虑，每个网站都会设置自己的Robots协议来明示搜索引擎，哪些内容是愿意和允许被搜索引擎收录的，哪些则不允许。搜索引擎则会按照Robots协议给与自己的权限来进行信息抓取。所有搜索引擎必须遵守Robots协议已经成为国际惯例。“这就好比一个正常的人去到别人家里，需要先敲门，得到许可以后才能进入客厅。除非有主人的进一步许可和邀请，否则你不能擅自进入内室，或者在别人家里四处溜达。”洪波打比方说。
　　
　　对于360违反Robots协议的说法，奇虎360公司董事长周鸿祎表示：“百度是在滥用Robots协议，阻碍360进入搜索市场。”在他看来，Robots协议是国外搜索引擎和普通网站之间进行博弈的一个结果，形成了现在的行业规则。百度既是搜索引擎，也是内容网站，百度百科和百度知道等内容的Robots协议仅针对360搜索引擎，其他引擎都可以顺利抓取。这是一种歧视性的行为，完全是不正当竞争。周鸿祎强调说，百度百科和百度知道等都是公开的信息，没有任何隐私的内容，“如果百度认为360搜索引擎涉及百度的网站安全，那就请拿出证据，让专家、社会各界来评判”。
　　
　　关于“博弈”的说法，中国社会科学院信息化研究中心秘书长姜奇平认为，周鸿祎“话中有话”。他介绍说，15年前，美国遇到过“博弈”的问题，“博弈”双方是商家和消费者保护组织，他们围绕用户隐私问题最终得出一个原则，厂商要想获得消费者的个人隐私或个人信息，必须要经过消费者同意，这已经被写入法律。
　　
　　在姜奇平看来，把行业的游戏规则认定是博弈的结果，就相当于认为行业的游戏规则可以随意改动，“就像是两支队伍在踢足球比赛，比赛过程中一方突然说，这规则是经过博弈达成的，我还没认可呢，我有改动规则的权利。”姜奇平认为规则不是全靠商量着办的，也需要有法律的底线。“比如说，两个人决斗，约定死伤不追究对方责任，但法律是不允许决斗的，两个人之间的约定显然违反了法律，是不被法律认可的。”
　　
　　随意改动游戏规则会触犯行业底线，规则虽然没有法律的强制约束力，但行业所有人都遵守。如果要改变游戏规则，姜奇平认为这需要当事各方集体协商，“既然周鸿祎把事情提出来了，有关的行业协会，甚至政府层面就需要出面回应了”。
　　
　　除了认为360遭遇不正当竞争，周鸿祎还回应说：“百度的内容都是网民一点一点贡献出来的，现在百度滥用Robots协议，用户使用360搜索引擎访问自己创造的内容，居然访问不了，这是什么道理？有的评论家口口声声说这是行业规范，这样滥用行业规范是正当行为吗？”
　　
　　姜奇平认为，周鸿祎忽略了信息的加工会创造价值。“他把加工过的和没加工的信息混为一谈，如果大家都可以在别人加工之后随意占取信息，谁还愿意提供服务呢？”他坦言，360具有很强的进取精神，但这不能成为把优势建立在破坏行业游戏规则上的理由。他表示：“如果不遵守规则，就有可能再现前年3Q大战的情况。工信部目前要提前介入，应该是为了避免一场大战。”
　　
　　姜奇平建议行业内也应该反思，在规则制定之后，应该重申竞争者遵守规则，“只要在规则下，怎么竞争应该由市场来决定”。