近日,百度起訴奇虎360搜索違反了ROBOTS協(xié)議,并強(qiáng)行抓取搜索內(nèi)容一案,在北京進(jìn)行了開庭審理。在本次庭審結(jié)束之前,法官對雙方進(jìn)行調(diào)節(jié),但原被告均表示,如果對方不能改變不正當(dāng)競爭的侵權(quán)行為,就無法接受調(diào)解,目前該案件仍需進(jìn)一步審理。本次案件的原因是百度使用業(yè)內(nèi)規(guī)則Robots協(xié)議拒絕360搜索抓取其旗下的網(wǎng)站內(nèi)容,但是360不管Robots協(xié)議,仍強(qiáng)行抓取。百度公司認(rèn)為,360搜索此舉破壞了業(yè)界規(guī)則,構(gòu)成了不正當(dāng)競爭,由此起訴360公司并向其索賠一億多元。而360搜索則認(rèn)為,百度單獨(dú)封殺360搜索的行為是一種單方面限制競爭對手的發(fā)展的行為,是利用自己在市場上的優(yōu)勢地位,構(gòu)成了不正當(dāng)競爭。
本次訴訟,有一個核心議題,那就是關(guān)于Robots協(xié)議的問題。Robots協(xié)議是網(wǎng)站站長與搜索引擎之間的一個協(xié)議,協(xié)議的規(guī)則通常各個搜索引擎都清楚,協(xié)議的實(shí)現(xiàn)是以Robots.txt文件來實(shí)現(xiàn)的。網(wǎng)站站長將搜索引擎的抓取規(guī)則在robots.txt里面按照一定的語法表述到文件里,然后依次來決定是否要被搜索引擎抓取數(shù)據(jù)。robots協(xié)議現(xiàn)在已被廣泛采用,Google、百度等搜索引擎也均嚴(yán)格遵守,既然360搜索也屬于搜索引擎,自然一般不能例外,也應(yīng)遵守此協(xié)議。該協(xié)議要求在網(wǎng)站的根目錄下的robots.txt指明哪些內(nèi)容可以被搜索引擎抓取,哪些不可以;也可以指明對哪個搜索引擎開放,或者對哪個不開放。既然robots協(xié)議有此項(xiàng)約束,百度依此功能限制360抓取數(shù)據(jù)也是可以理解的,因?yàn)楫吘勾隧?xiàng)協(xié)議是自由設(shè)定的,怎么設(shè)定協(xié)議的內(nèi)容并不違反行業(yè)規(guī)則和法律。
這次官司比較難處理之處主要在于兩點(diǎn):第一、法官大多不明白計(jì)算機(jī)互聯(lián)網(wǎng)上的這些名詞,什么爬蟲、協(xié)議、robots、抓取等等,而法官若要對此案審理清楚,就必須首先弄明白這些名詞各代表什么以及他們的功能和含義。第二、robots協(xié)議屬于搜索引擎與網(wǎng)站站長之間的一種“口頭約定”,或者可以成為一種“行業(yè)規(guī)則”,從事搜索引擎的企業(yè)都應(yīng)該遵循這個協(xié)議的規(guī)定,但是這是靠自律,而沒有強(qiáng)制性在其中。360搜索既然從事搜素引擎業(yè)務(wù),自然不應(yīng)違反此協(xié)議。但是不應(yīng)違反,與不能違反是不一樣的。目前似乎還沒有法律做出過這種限制,即不遵守robots協(xié)議即違法。因此違反robots協(xié)議本身是否被法律制裁,現(xiàn)在還難以說清。
對于百度公司來說,除了以上兩點(diǎn)對自己不太有利以外,還有一點(diǎn),就是如何提供360違反協(xié)議的證據(jù)。而如果百度公司能提供可信的、充足的360搜索抓取自己下屬網(wǎng)站的數(shù)據(jù),那么無論官司最后結(jié)果是什么,百度公司在行業(yè)約束規(guī)則上占到了制高點(diǎn),至少在道義上已經(jīng)贏了官司。因?yàn)樵趲缀跛姓鹃L眼里,robots協(xié)議是用于限制搜索引擎抓取的,而360搜索不遵守詞協(xié)議,那么將會令360公司背負(fù)違背協(xié)議、不顧站長利益的惡劣名義。不管百度的數(shù)據(jù)如何重要,既然有robots限制,就不能再繼續(xù)抓取。每一個行業(yè)都已其規(guī)則,而robots協(xié)議既然已被廣大站長所熟知,又被眾多的搜素引擎所遵守,那實(shí)際上就等同于行業(yè)規(guī)則,是不能違反的,否則站長如何保護(hù)自己網(wǎng)站里的隱私數(shù)據(jù)呢?而如果百度無法證明360違反了協(xié)議,法官最終判定360搜索贏得官司,那么對于百度來說,建更可能無法接受這個結(jié)果。但從現(xiàn)在的情勢來看,百度似乎并不會輸?shù)暨@場官司。
筆者是鄭州網(wǎng)站建設(shè)從業(yè)者,也曾使用過robots協(xié)議,一直以為,無論哪一個搜索引擎,都應(yīng)該嚴(yán)格遵守robots協(xié)議,不能抓取受robots保護(hù)的數(shù)據(jù),如果強(qiáng)行抓取,就屬于侵犯隱私,違反協(xié)議規(guī)定和行業(yè)規(guī)則,是應(yīng)該受到制裁的。據(jù)360所說的百度公司有不正當(dāng)競爭的行為,對此的認(rèn)證,還需要由法官來判斷。不管如何,我們希望所有的搜索引擎都能夠遵守行業(yè)規(guī)則,不搞不正當(dāng)競爭的行為,還互聯(lián)網(wǎng)搜索市場一個安寧,給互聯(lián)網(wǎng)的未來發(fā)展創(chuàng)造一個良好的環(huán)境,少一分?jǐn)D兌,多一分互助,相信我們的互聯(lián)網(wǎng)一定會發(fā)展得越來越好的。