搜索引擎優(yōu)化（SEO）的歷史

搜索引擎優(yōu)化（SEO）的歷史

一、1994-1997：雅虎誕生與SEO的誕生1994年7月，Lucos推出了基于搜索機(jī)器人的數(shù)據(jù)發(fā)現(xiàn)技術(shù)，并支持搜索結(jié)果相關(guān)性排序額，它還第一次讓搜索引擎能夠使用網(wǎng)頁自動(dòng)摘要。1995年底，AltaVista推出，由于它具備大量的新的搜索功能，深受大眾好評(píng)，AltaVista是第一個(gè)支持自然語言搜索，具備了基于網(wǎng)頁內(nèi)容分析、智能處理的能力，第一個(gè)實(shí)現(xiàn)高級(jí)搜索語法的搜索引擎(如AND，OR，NOR等)，同時(shí)還能搜索新聞群組中的內(nèi)容，還能搜索圖片。這一階段也是yahoo發(fā)展的初期階段，大多數(shù)人在這個(gè)時(shí)候?qū)λ阉鞑⒉皇煜?，也不太知道有搜索引擎這回事，但是對(duì)于yahoo，大多數(shù)人則有所了解，尋找網(wǎng)站就上Yahoo。所以，將你的網(wǎng)站送到Y(jié)ahoo是很必要的，在此階段，只要你的網(wǎng)站基本有個(gè)模樣，有一定的可看性，一般只要向Yahoo提交地址，72小時(shí)內(nèi)就能出現(xiàn)在Yahoo目錄上。Yahoo對(duì)所有的網(wǎng)站進(jìn)行人工歸類，一般是按照字母順序排列網(wǎng)站，自然開頭為“A”的網(wǎng)站排到開頭為“B”的前面，而有兩個(gè)A的網(wǎng)站，排在有A和B的網(wǎng)站前面，比如，AmericanAirlines的網(wǎng)站不僅排在BankofAmerica的前面，而且也排在AmericanBasketballAssociation前面。所以，大批網(wǎng)站就以追求A字來命名。這是搜索引擎優(yōu)化的雛形。這個(gè)邏輯和黃頁電話號(hào)碼的排名邏輯一樣。在這一階段，Yahoo的欄目編輯們也在網(wǎng)上積極搜索新的網(wǎng)站，豐富他們的數(shù)據(jù)庫，而他們的搜索都是人工的，最典型的方法就是從一個(gè)網(wǎng)站的鏈接去訪問另外一個(gè)網(wǎng)站。遇到一個(gè)好的網(wǎng)站，他們就給站主發(fā)電子郵件，歡迎站主登錄，而且都是免費(fèi)的。這些Yahoo都編輯訪問網(wǎng)站的行為和我們今天看到的搜索引擎蜘蛛和機(jī)器人的形式是一樣的孜孜不倦。有個(gè)Yahoo編輯這么關(guān)心你的網(wǎng)站，比你還著急登錄你的網(wǎng)站，而且一文不收，這個(gè)在今天是無法想象的。你的網(wǎng)站登錄后，你還可以隨時(shí)更改登錄的信息，一般72小時(shí)就得到了更新。值得一提的是，雖然在這個(gè)時(shí)期中文網(wǎng)站很少，而且大多數(shù)是美國的中文網(wǎng)和在臺(tái)灣的網(wǎng)站，但是Yahoo顯然注意到中文網(wǎng)站的未來，而且迅速有個(gè)中文譯名“雅虎”，而這個(gè)不僅僅是因?yàn)樗膭?chuàng)始人是楊致遠(yuǎn)。這一階段也是SEO對(duì)雛形時(shí)期。網(wǎng)上網(wǎng)下出現(xiàn)了一些論文，討論文字對(duì)應(yīng)、數(shù)據(jù)挖掘和對(duì)搜索引擎程序員的訪談。人們初步有了讓網(wǎng)頁內(nèi)容符合搜索引擎數(shù)據(jù)庫原理的模糊意識(shí)。同樣，將網(wǎng)站收錄到搜索引擎也是很容易的，你的網(wǎng)頁只要關(guān)鍵詞的使用達(dá)到一定密度就輕而易舉地排列在搜索引擎上了。值得一提的是，搜索引擎InfoSeek首次做到每日更新。早晨八點(diǎn)你提交網(wǎng)站，下午就被收錄，第二天就能出現(xiàn)在搜索之中。正是因?yàn)檫@么快的更新和折磨容易的提交到收錄，大量的站主開始變著法子頻繁登錄不同的網(wǎng)址，英文出現(xiàn)Spam這個(gè)詞來形容站住不負(fù)責(zé)地制造泛濫的垃圾，很快使這些搜索引擎吃不消。所以，SEO從一開始就是黑白兩道開始的。白的，英文里是white-hat，就是按照能夠悟出的搜索引擎原理來合理地調(diào)整自己的網(wǎng)站，使搜索引擎能收錄并得到好的曝光。黑道，英文叫black-hat，這類優(yōu)化者仿佛是黑客，尋找搜索引擎的弱點(diǎn)，力圖將混淆的信息強(qiáng)塞給搜索引擎，從而為真實(shí)的網(wǎng)站提高曝光機(jī)會(huì)。這個(gè)時(shí)期，因?yàn)閺?qiáng)大的利潤誘惑，不良網(wǎng)站可以說是帶頭去“黑”搜索引擎。所以SEO和搜索引擎從一開始就是愛和恨的關(guān)系，這個(gè)時(shí)期，收費(fèi)的網(wǎng)站優(yōu)化服務(wù)也開始在美國出現(xiàn)。在中文搜索引擎領(lǐng)域，中國的起步其實(shí)并不晚。1996年8月成立的搜狐公司是最早參與做類似Yahoo的我那管理信息分類導(dǎo)航的網(wǎng)站，曾一度有“出門找地圖，上網(wǎng)找搜狐”的美譽(yù)。這個(gè)時(shí)候，沒有人注意在斯坦福大學(xué)的一個(gè)宿舍里，兩個(gè)聰明的學(xué)生正在慢慢孕育一個(gè)令世界矚目的新型搜索引擎。他們發(fā)明了一個(gè)新的叫PageRank的理論，來重新塑造搜索引擎。這個(gè)新型搜索引擎就是現(xiàn)在的Google。二、1998-1999年：Google出現(xiàn)和SEO理論的浮現(xiàn)這一階段，美國的互聯(lián)網(wǎng)大會(huì)開始有一些關(guān)于網(wǎng)站優(yōu)化的文章發(fā)表。這些文章開始關(guān)注到鏈接流行度(LinkPopularity)、名錄網(wǎng)站鏈接(DirectoryListing)的意義。這段時(shí)間，搜索引擎也知道了需要限制人們的網(wǎng)站提交來防止垃圾網(wǎng)站的泛濫，于是開始組織反擊。AltaVista開始大規(guī)模剔除含有“我們來優(yōu)化”或者“我們來推廣”這類文字的網(wǎng)頁。SEO的實(shí)踐者開始意識(shí)到，要破解搜索引擎的原理越來越難。在1999年將一個(gè)網(wǎng)站提升到前十名要比在1998年難上十倍。搜索引擎開始更多關(guān)注鏈接流行度的意義。Google也在1998年收到了第一張十萬美元的風(fēng)險(xiǎn)投資，搬出了斯坦福校園，正式命名為Google公司，域名也從變成。這個(gè)新的搜索引擎衡量網(wǎng)站的重要性首次將鏈接流行度作為排名的標(biāo)準(zhǔn)之一。1999年5月，英國的FAST公司推出ALLTheWeb搜索引擎。它的網(wǎng)頁搜索可利用ODP自動(dòng)分類，支持Flash和PDF文件搜索，支持多語言搜索，還提供新聞搜索、圖像搜索、視頻、MP3和FTP搜索，擁有極其強(qiáng)大的高級(jí)搜索功能。這么強(qiáng)大的功能使它成為最流行的搜索引擎之一。這一階段的初期，搜索引擎也開始了多元化的進(jìn)程，開始設(shè)立多語種的網(wǎng)站，比如AltaVista就率先開始了拉丁語的版本。臺(tái)灣中正大學(xué)吳升教授所領(lǐng)導(dǎo)的GAIS實(shí)驗(yàn)室于1998年1月創(chuàng)立了OpenFind中文搜索引擎。它是最早開發(fā)的中文智能搜索引擎，號(hào)稱能抓取全球最多的網(wǎng)頁并開始進(jìn)入英文搜索引擎。1999年Google獲得了兩千五百萬的資金，開始全力發(fā)展，并且已經(jīng)在媒體處理50萬次搜索，這個(gè)投資也使Google再次搬家到舊金山——硅谷地區(qū)較PaloAlto的城市。Google也開始結(jié)識(shí)合作伙伴，從AOL到Netscape不久，Google再次搬家到目前的全球總部依然是舊金山——硅谷叫MountainView的城市。這時(shí)候的搜索一千年開始設(shè)法控制市場(chǎng)，廣告廣泛地出現(xiàn)在搜索引擎上。這引起了許多搜索者的反感，因?yàn)榇蠹疫€是在用56KBmodem上網(wǎng)，大量的廣告使網(wǎng)站頁面出現(xiàn)太慢。Google發(fā)現(xiàn)了這個(gè)影響搜索步伐的致命的問題。簡(jiǎn)潔的網(wǎng)頁設(shè)計(jì)使眾人耳目一新，飛快地搜索速度更使得各個(gè)站主奔走相告，每個(gè)站主論壇都充滿了對(duì)Google的極好評(píng)價(jià)，雜志的采訪也是接連不斷地對(duì)Google進(jìn)行推薦，Google的全面演出就正式登臺(tái)了。三、2000-2001年：百度的出現(xiàn)和搜索引擎的革新從2000年開始，登錄一個(gè)網(wǎng)站到搜索引擎花的時(shí)間是越來越長(zhǎng)。搜索引擎熱衷于收費(fèi)服務(wù)，從一個(gè)新的搜索引擎Inktomi到AltaVista都染上了金線。與此同時(shí)，搜索者希望有一個(gè)搜索引擎能真正地給他們帶來有用的信息。Google沒有辜負(fù)人民的期望，它的精確搜索開始鞏固它在搜索引擎中的地位。首先出局的是InfoSeek，這個(gè)InfoSeek在1998被迪士尼公司買下，變成G。從那以后，InfoSeek被拋棄，而G也適用Yahoo搜索來代替。在1999年，InfoSeek的一位華人工程師離開了這個(gè)搜索引擎而駛向北京，他力圖要?jiǎng)?chuàng)立一個(gè)“中國人自己”搜索引擎，并且受一句中國古詞“眾里尋她千百度，驀然回首，那人卻在燈火闌珊處”的啟發(fā)，將中國人的搜索引擎起名叫“百度”。這個(gè)工程師就是百度的創(chuàng)始人之一—李彥宏。李彥宏自己就是新一代的搜索技術(shù)專家，他早在1996年就解決了如何將基于網(wǎng)頁質(zhì)量的排序與基于相關(guān)性排序完美結(jié)合的問題，并獲得美國專利。百度公司結(jié)合硅谷搜索引擎人才精英，依托北京最優(yōu)秀的軟件人才，開發(fā)了大型商業(yè)化的中文搜索引擎，中文搜索從此與英文搜索站在了同一起跑線上，同時(shí)，百度搜索巧妙地解決了數(shù)據(jù)更新的瓶頸，整個(gè)中文網(wǎng)頁的數(shù)據(jù)庫可以最快每天更新一次。2000年也是Flash動(dòng)畫、JavaScript特技Rollover和動(dòng)態(tài)圖片的流行之年。這些動(dòng)態(tài)的形式讓人喜愛，但是很少有人知道，可惜搜索引擎卻不能認(rèn)識(shí)這些，搜索引擎只能閱讀文字，而非這些感官的創(chuàng)意，因?yàn)樗鼈円恢笔窃谀M人的閱讀方式，但是卻無法模擬人的感知，直到今天，搜索引擎也沒有解決這個(gè)問題。從這一年開始，實(shí)際上，向搜索引擎呈交新的網(wǎng)站不需要按照以前那樣在搜索引擎的頁面上填寫“ADDURL”，搜索引擎已經(jīng)能從一個(gè)存在的網(wǎng)站上發(fā)現(xiàn)新網(wǎng)站的鏈接來訪問并收錄。在這個(gè)時(shí)候，SEO實(shí)踐者也開始知道，如果網(wǎng)站能被目錄導(dǎo)航站(Directory)，特別是開放目錄ODP(OpenDirectoryProject)收錄，將非常有助于搜索排名的提升。最知名的ODP是DMOZ()，由尼克?斯冠塔河鮑勃?圖爾兩位Sun公司的工程師在1998年創(chuàng)辦，它是一個(gè)人工來收錄網(wǎng)站進(jìn)行分類的目錄網(wǎng)站。在這點(diǎn)上，它的組成和Yahoo市一樣的。不同的是，它是由全球的站主自己做編輯來維護(hù)的，而Yahoo是由專業(yè)編輯來維護(hù)的。關(guān)于DMOZ，搜索引擎青睞DMOZ，是因?yàn)榻?jīng)過人工分析的網(wǎng)站的可信度自然要高于搜索引擎蜘蛛和機(jī)器人來獲取的網(wǎng)站信息可靠。2001年的收費(fèi)登錄大為紅火。搜索引擎市場(chǎng)經(jīng)歷大清洗，人們開始拋棄搜索引擎Hotbot，AltaVista和Excite。AltaVista試圖仿效Google方式來重新回到縮小版的搜索引擎，但是這個(gè)垂死掙扎非常痛苦的失敗了，并在2003年被Yahoo收購。Inktomi也失去了好幾個(gè)應(yīng)用伙伴，急劇走下坡路，2004年同樣被Yahoo收購，而且成為了今天Yahoo搜索的主要核心技術(shù)。四2002-2007年：GoogleDance和SEO的不眠之夜其實(shí)在2001年，敏感的占住和SEO實(shí)踐者感覺到了一個(gè)從未有過的現(xiàn)象。有些人對(duì)網(wǎng)站在Google上帝排名一夜之間消失，而有的網(wǎng)站則名列首位。這個(gè)現(xiàn)象幾乎是每月一次。后來，人們知道，這就是Google定期地更新它的索引(Index)的距離活動(dòng)，給人的感覺就像跳舞一樣，因此被SEO實(shí)踐者稱為GoogleDance。正是因?yàn)橛蠫oogleDance，每個(gè)SEO實(shí)踐者都在Google更新的那個(gè)晚上熬夜地看自己的SEO成果能否在Google上實(shí)現(xiàn)。每次更新有贏家和輸家，網(wǎng)上SEO論壇總有成千上萬的討論，期望知道下次更新能有什么可以預(yù)料的，或者猜測(cè)更新的具體日期。搜索引擎在這個(gè)階段中遇到更嚴(yán)重的泛濫問題。SEO實(shí)踐者大量采用門戶網(wǎng)頁(DoorwayPage)、重復(fù)網(wǎng)站(DuplicateWebsite)、偽裝網(wǎng)頁(CloackedPage)、隱藏鏈接(HiddenLinks)等來試圖欺騙Google。另外，DMOZ被Google作為一個(gè)重要的收錄新網(wǎng)站的渠道，DMOZ也被注入許多垃圾網(wǎng)站。2002年是大量SEO被濫用的一年。但是，搜索引擎從這些與SEO非法實(shí)踐的斗爭(zhēng)中不斷豐富自己辨別的技術(shù)，對(duì)抓住的網(wǎng)站拒絕收錄，已經(jīng)收錄的則給予剔除。但是這個(gè)封鎖也冤枉路不少誠實(shí)的SEO網(wǎng)站。在中國，百度于2001年9月開始提供公共搜索服務(wù)，并成功地使搜狐和新浪開始使用它的搜索技術(shù)。同時(shí)，它還提供新聞搜索服務(wù)，迅速擴(kuò)大用戶群。2003年，越來越多的網(wǎng)站設(shè)計(jì)對(duì)Flash的應(yīng)用有了謹(jǐn)慎的態(tài)度。這一年也是搜索引擎繼續(xù)反擊垃圾泛濫的一年。許多SEO實(shí)踐者明白黑帽技術(shù)(black-hat)已經(jīng)行不通，而是要扎扎實(shí)實(shí)地真正提高網(wǎng)站的素質(zhì)。Google在2003年更是擠掉了AltaVista和Inktomi，成為獨(dú)大。Google誕生于一個(gè)搜索引擎紛雜的時(shí)代，在那個(gè)時(shí)代，像AltaVista等搜索引擎對(duì)自己的市場(chǎng)份額太具信心而懶得變化。Google由各個(gè)站主和SEO實(shí)踐者宣揚(yáng)，從而一舉后來居上。而現(xiàn)在，Google開始反擊垃圾泛濫，矛頭直接對(duì)向曾經(jīng)支持它的這些站主和SEO實(shí)踐者。這些人成了Google成功的犧牲品。2003年的Google的“佛羅里達(dá)更新”(FloridaUpdate)真是讓全世界的站主領(lǐng)教了Google的厲害。倘若強(qiáng)烈颶風(fēng)一般，F(xiàn)loridaUpdate一夜之間讓千萬個(gè)網(wǎng)站從搜索中消失或者從前十名刮到100頁以后。這個(gè)發(fā)生在11月16日的更新，尤其對(duì)寄希望在即將來臨的圣誕節(jié)狠賺一筆的電子商務(wù)網(wǎng)站損失慘重。從現(xiàn)在來看，Google的這個(gè)更新是反擊垃圾網(wǎng)站和不法SEO行為的一次重要戰(zhàn)役。然而，由于使用的過濾器(filter)不完美，沖擊了很多無辜網(wǎng)站。之所以叫“佛羅里達(dá)更新”，是因?yàn)檫@個(gè)更新由Google在佛羅里達(dá)的數(shù)據(jù)中心開始的。之后，2004年1月叫做“AustinUpdate”的余波同樣也對(duì)相當(dāng)多的網(wǎng)站造成沖擊。霎時(shí)間，所以SEO實(shí)踐者都突然搖身變成了GoogleAdwords的專家，大家不能不依靠Google廣告來維持這段節(jié)日期間的銷售。關(guān)于這兩個(gè)歷史性的Google更新，給了許多SEO實(shí)踐者相當(dāng)大的教訓(xùn)。規(guī)規(guī)矩矩地從改善網(wǎng)站本身的素質(zhì)而不是投機(jī)取巧，成為了SEO唯一可行的方法。PPC也穩(wěn)定的成為營銷策略中的重要手段，而S