在門戶網(wǎng)站們鞏固自己對(duì)互聯(lián)網(wǎng)訪問(wèn)流量的控制權(quán)的同時(shí),來(lái)自獨(dú)立的電子商務(wù)公司對(duì)訪問(wèn)流量的需求也狂飆不止。獲取流量的代價(jià)也變得非常昂貴,主要的門戶網(wǎng)站開價(jià)數(shù)百萬(wàn)美元出售它們網(wǎng)站上的地盤。而互聯(lián)網(wǎng)公司也大肆揮霍來(lái)自風(fēng)險(xiǎn)投資人和股票市場(chǎng)的現(xiàn)金,排起長(zhǎng)隊(duì)等著在大門戶網(wǎng)站占據(jù)一席之地。1998年和1999年的訪問(wèn)流量買賣協(xié)議的清單,讀著就像.com公司的死亡行進(jìn):CDNow花了1 850萬(wàn)美元同Lycos達(dá)成協(xié)議,Preview Travel花費(fèi)1 500萬(wàn)美元購(gòu)得Excite網(wǎng)站上的一席之地,AutoConnect則在美國(guó)在線投入了1 700萬(wàn)美元。
而這些大量的訪問(wèn)流量買賣的基礎(chǔ)非常薄弱。商務(wù)網(wǎng)站在購(gòu)買通往用戶群的通路的時(shí)候,并沒(méi)有考慮過(guò)這些用戶是否對(duì)它們的網(wǎng)站所提供的商品有任何的興趣。成為美國(guó)在線上唯一一家信用卡供應(yīng)商,或是成為L(zhǎng)ycos上首要的CD銷售商也許會(huì)顯得很具吸引力,可是很難證明這樣的交易能夠給公司帶來(lái)任何實(shí)質(zhì)性的回報(bào)。其實(shí),警報(bào)訊號(hào)隨處可見,就連通常凱歌高唱的網(wǎng)絡(luò)研究機(jī)構(gòu)Jupiter Communications都于1999年發(fā)布報(bào)告,詳細(xì)介紹此類交易失敗的案例。但是,這是一種土地?fù)屨?,在這樣的情況下,誰(shuí)也不愿意做那個(gè)被排除在外的人。這個(gè)時(shí)代的風(fēng)氣是:先進(jìn)去搶個(gè)座,然后出比競(jìng)爭(zhēng)對(duì)手更高的價(jià)格,拼命堅(jiān)持下去。
從很短的一個(gè)時(shí)期(只有3年,以事物的發(fā)展而言確實(shí)非常短暫)看是否物有所值根本無(wú)關(guān)緊要。這個(gè)互聯(lián)網(wǎng)空間變成了職業(yè)橄欖球超級(jí)杯買賣。CDNow把買來(lái)的訪問(wèn)流量做什么用了這個(gè)問(wèn)題遠(yuǎn)不如它買到了這些流量的事實(shí)更重要。對(duì)于這個(gè)行業(yè)的許多公司來(lái)說(shuō),訪問(wèn)流量才是證明互聯(lián)網(wǎng)公司價(jià)值的萬(wàn)金油。20世紀(jì)90年代末,有幾家公司僅僅因?yàn)樵谙窬W(wǎng)景和雅虎這樣的門戶網(wǎng)站上成功購(gòu)得一席之地而獲得風(fēng)險(xiǎn)資基金或者成功上市訪問(wèn)流量指標(biāo)是一個(gè)網(wǎng)站吸引的網(wǎng)頁(yè)閱讀者的總數(shù),是評(píng)價(jià)一家網(wǎng)絡(luò)公司最直觀的指標(biāo)。這種方法的一個(gè)主要問(wèn)題就是,它沒(méi)有提供一個(gè)好的辦法來(lái)了解到底這些訪問(wèn)流量最終會(huì)不會(huì)被轉(zhuǎn)換成付費(fèi)的用戶。。
其結(jié)果是,搜索技術(shù)創(chuàng)新衰敗了,平民的悲劇迅速蔓延:搜索垃圾作弊者迅速占領(lǐng)了索引。搜索引擎垃圾網(wǎng)頁(yè),就是不道德的網(wǎng)站管理員為了獲得免費(fèi)的流量,設(shè)法置于索引頂端的非相關(guān)性搜索結(jié)果。至今這仍然是一個(gè)嚴(yán)重的問(wèn)題,盡管現(xiàn)在的搜索引擎對(duì)抗作弊網(wǎng)頁(yè)的手段越來(lái)越高級(jí),1998年的時(shí)候,甚至還沒(méi)有幾個(gè)人知道搜索引擎作弊是怎么回事。
在Google出現(xiàn)以前,大部分的搜索引擎都采用簡(jiǎn)單的關(guān)鍵詞算法來(lái)決定等級(jí)。不過(guò),具體的計(jì)算機(jī)處理技術(shù)要比這個(gè)說(shuō)法更復(fù)雜一些。例如,有些作弊者(尤其是成人娛樂(lè)網(wǎng)站)意識(shí)到它們可以用訪問(wèn)流量很多的詞,比如“汽車”,來(lái)騙取訪問(wèn)流量的時(shí)候,它們就在自己的網(wǎng)站上放滿這些關(guān)鍵詞(經(jīng)常是在白色背景上用白色的小字),這使得這樣一種模式癱瘓了。這就是為什么1998年的時(shí)候,Lycos提供的同“汽車”對(duì)應(yīng)的搜索結(jié)果大多都是色情網(wǎng)站。