seo發(fā)展歷史
搜索引擎優(yōu)化(SEO)不是突然出現(xiàn)的一個技術(shù)，而是和搜索引擎同步發(fā)展起來的，兩者的關(guān)系雖然不能說是"矛和盾"的關(guān)系，但是可以肯定的是，因為有SEO才使得搜索引擎技術(shù)能夠變得更完善。
一、1994-1997年:雅虎誕生與SEO誕生
1993年8月，Lycos推出了基于搜索機器人的數(shù)據(jù)發(fā)現(xiàn)技術(shù)，并支持搜索結(jié)果相關(guān)性排序額，它還第一次讓搜索引擎能夠使用網(wǎng)頁自動摘要。
1995年底，Alta Vista推出，由于它具備大量的新的搜索功能，深受大眾好評，Alta Vista是第一個支持自然語言搜索，具備了基于網(wǎng)頁內(nèi)容分析、智能處理的能力，第一個實現(xiàn)高級搜索語法的搜索引擎(如AND，OR，NOR等)，同時還能搜索新聞群組中的內(nèi)容，還能搜索圖片。
這一階段也是yahoo發(fā)展的初期階段，大多數(shù)人在這個時候?qū)λ阉鞑⒉皇煜?，也不太知道有搜索引擎這回事，但是對于yahoo，大多數(shù)人則有所了解，尋找網(wǎng)站就上Yahoo。所以，將你的網(wǎng)站送到Y(jié)ahoo是很必要的，在此階段，只要你的網(wǎng)站基本有個模樣，有一定的可看性，一般只要向Yahoo提交地址，72小時內(nèi)就能出現(xiàn)于Yahoo目錄上。Yahoo對所有的網(wǎng)站進行人工歸類，一般是按照字母順序排列網(wǎng)站，自然開頭為"A"的網(wǎng)站排到開頭為"B"的前面，而有兩個A的網(wǎng)站，排在有A和B的網(wǎng)站前面，比如，American Airlines的網(wǎng)站不僅排在Bank of America的前面，而且也排在American Basketball Association前面。所以，大批網(wǎng)站就以追求A字來命名。這是搜索引擎優(yōu)化的雛形。這個邏輯和黃頁電話號碼的排名邏輯一樣。
在這一階段，Yahoo的欄目編輯們也在網(wǎng)上積極搜索新的網(wǎng)站，豐富他們的數(shù)據(jù)庫，而他們的搜索都是人工的，最典型的方法就是從一個網(wǎng)站的鏈接去訪問另外一個網(wǎng)站。遇到一個好的網(wǎng)站，他們就給站主發(fā)電子郵件，歡迎站主登錄，而且都是免費的。
這些Yahoo編輯訪問網(wǎng)站的行為和我們看到的搜索引擎蜘蛛和機器人的形式是一樣的孜孜不倦。有個Yahoo編輯這么關(guān)心你的網(wǎng)站，比你還著急登錄你的網(wǎng)站，而且一文不收，這個在是無法想象的。你的網(wǎng)站登錄后，你還可以隨時更改登錄的信息，一般72小時就得到了更新。
值得一提的是，雖然在這個時期中文網(wǎng)站很少，而且大多數(shù)是美國的中文網(wǎng)和在臺灣的網(wǎng)站，但是Yahoo顯然注意到中文網(wǎng)站的未來，而且迅速有個中文譯名"雅虎"，而這個不僅僅是因為它的創(chuàng)始人是楊致遠。
這一階段也是SEO的雛形時期。網(wǎng)上網(wǎng)下出現(xiàn)了一些論文，討論文字對應(yīng)、數(shù)據(jù)挖掘和對搜索引擎程序員的訪談。人們初步有了讓網(wǎng)頁內(nèi)容符合搜索引擎數(shù)據(jù)庫原理的模糊意識。同樣，將網(wǎng)站收錄到搜索引擎也是很容易的，你的網(wǎng)頁只要關(guān)鍵詞的使用達到一定密度就輕而易舉地排列在搜索引擎上了。
值得一提的是，搜索引擎InfoSeek首次做到每日更新。早晨八點你提交網(wǎng)站，下午就被收錄，第二天就能出現(xiàn)于在搜索之中。正是因為這么快的更新和這么容易的提交收錄，大量的站主開始變著法子頻繁登錄不同的網(wǎng)址，英文出現(xiàn)Spam這個詞來形容站主不負責(zé)地制造泛濫的垃圾，很快使這些搜索引擎吃不消。
所以，SEO從一開始就是黑白兩道開始的。白的，英文里是white-hat，就是按照能夠悟出的搜索引擎原理來合理地調(diào)整自己的網(wǎng)站，使搜索引擎能收錄并得到好的曝光。黑道，英文叫black-hat，這類優(yōu)化者仿佛是黑客，尋找搜索引擎的弱點，力圖將混淆的信息強塞給搜索引擎，從而為真實的網(wǎng)站提高曝光機會。
這個時期，因為強大的利潤誘惑，成人網(wǎng)站可以說是帶頭去"黑"搜索引擎。所以SEO和搜索引擎從一開始就是愛和恨的關(guān)系，這個時期，收費的網(wǎng)站優(yōu)化服務(wù)也開始在美國出現(xiàn)。
在中文搜索引擎領(lǐng)域，中國的起步其實并不晚。1996年8月成立的搜狐公司是最早參與做類似Yahoo的管理信息分類導(dǎo)航的網(wǎng)站，曾一度有"出門找地圖，上網(wǎng)找搜狐"的美譽。
這個時候，沒有人注意在斯坦福大學(xué)的一個宿舍里，兩個聰明的學(xué)生正在慢慢孕育一個令世界矚目的新型搜索引擎。他們發(fā)明了一個新的叫PageRank的理論，來重新塑造搜索引擎。這個新型搜索引擎就是Google。
二、1998-1999年:Google和SEO理論浮現(xiàn)
這一階段，美國的互聯(lián)網(wǎng)大會開始有一些關(guān)于網(wǎng)站優(yōu)化的文章發(fā)表。這些文章開始關(guān)注到鏈接流行度(Link Popularity)、名錄網(wǎng)站鏈接(Directory Listing)的意義。這段時間，搜索引擎也知道了需要限制人們的網(wǎng)站提交來防止垃圾網(wǎng)站的泛濫，于是開始組織反擊。
Alta Vista開始大規(guī)模剔除含有"我們來優(yōu)化"或者"我們來推廣"這類文字的網(wǎng)頁。SEO的實踐者開始意識到，要破解搜索引擎的原理越來越難。在1999年將一個網(wǎng)站提升到前十名要比在1998年難上十倍。搜索引擎開始更多關(guān)注鏈接流行度的意義。
Google也在1998年收到了第一張十萬美元的風(fēng)險投資，搬出了斯坦福校園，正式命名為Google公司，域名也從google.stanford. edu變成google. com。這個新的搜索引擎衡量網(wǎng)站的重要性首次將鏈接流行度作為排名的標準之一。
1999年5月，英國的FAST公司推出ALLTheWeb搜索引擎。它的網(wǎng)頁搜索可利用ODP自動分類，支持Flash和PDF文件搜索，支持多語言搜索，還提供新聞搜索、圖像搜索、視頻、MP3和FTP搜索，擁有極其強大的高級搜索功能。這么強大的功能使它成為最流行的搜索引擎之一。
這一階段的初期，搜索引擎也開始了多元化的進程，開始設(shè)立多語種的網(wǎng)站，比如AltaVista就率先開始了拉丁語的版本。臺灣中正大學(xué)吳升教授所領(lǐng)導(dǎo)的GAIS實驗室于1998年1月創(chuàng)立了OpenFind中文搜索引擎。它是最早開發(fā)的中文智能搜索引擎，號稱能抓取全球最多的網(wǎng)頁并開始進入英文搜索引擎。
1999年Google獲得了兩千五百萬的資金，開始全力發(fā)展，并且已經(jīng)在每天處理50萬次搜索，這個投資也使Google再次搬家到舊金山--硅谷地區(qū)叫Palo Alto的城市。Google也開始結(jié)識合作伙伴，從AOL到Netscape不久，Google再次搬家到的全球總部依然是舊金山--硅谷叫Mountain View的城市。這時候的搜索引擎開始設(shè)法控制市場，廣告廣泛地出現(xiàn)于在搜索引擎上。這引起了許多搜索者的反感，因為大家還是在用56KB modem上網(wǎng)，大量的廣告使網(wǎng)站頁面出現(xiàn)的太慢。
Google發(fā)現(xiàn)了這個影響搜索步伐的致命的問題。簡潔的網(wǎng)頁設(shè)計使眾人耳目一新，飛快地搜索速度更使得各個站主奔走相告，每個站主論壇都充滿了對Google的極好評價，雜志的采訪也是接連不斷地對Google進行推薦，Google的全面演出就正式登臺了。
三、百度和搜索引擎的革新
從2000年開始，登錄一個網(wǎng)站到搜索引擎花的時間是越來越長。搜索引擎熱衷于收費服務(wù)，從一個新的搜索引擎Inktomi到Alta Vista都染上了金錢。與此同時，搜索者希望有一個搜索引擎能真正地給他們帶來有用的信息。Google沒有辜負人民的期望，它的精確搜索開始鞏固它在搜索引擎中的地位。
首先出局的是InfoSeek,這個InfoSeek在1998被迪士尼公司買下，變成Go. com。從那以后，InfoSeek被拋棄，而Go. com也使用Yahoo搜索來代替。在1999年，InfoSeek的一位華人工程師離開了這個搜索引擎而駛向北京，他力圖要創(chuàng)立一個"中國人自己"的搜索引擎，并且受一句中國古詞"眾里尋他千百度，驀然回首，那人卻在燈火闌珊處"的啟發(fā)，將中國人的搜索引擎起名叫"百度"。這個工程師就是百度的創(chuàng)始人之一-李彥宏。
李彥宏自己就是新一代的搜索技術(shù)專家，他早在1996年就解決了如何將基于網(wǎng)頁質(zhì)量的排序與基于相關(guān)性排序完美結(jié)合的問題，并獲得美國專利。百度公司結(jié)合硅谷搜索引擎人才精英，依托北京最優(yōu)秀的軟件人才，開發(fā)了大型商業(yè)化的中文搜索引擎，中文搜索從此與英文搜索站在了同一起跑線上，同時，百度搜索巧妙地解決了數(shù)據(jù)更新的瓶頸，整個中文網(wǎng)頁的數(shù)據(jù)庫可以最快每天更新一次。
2000年也是Flash動畫、JavaScript特技Rollover和動態(tài)圖片的流行之年。這些動態(tài)的形式讓人喜愛，但是很少有人知道，搜索引擎不能認識這些，搜索引擎只能閱讀文字，而非這些感官的創(chuàng)意，因為它們一直是在模擬人的閱讀方式，但是卻無法模擬人的感知，搜索引擎也沒有解決這個問題。
從這一年開始，實際上，向搜索引擎呈交新的網(wǎng)站不需要按照以前那樣在搜索引擎的頁面上填寫"ADD URL"，搜索引擎已經(jīng)能從一個存在的網(wǎng)站上發(fā)現(xiàn)新網(wǎng)站的鏈接來訪問并收錄。在這個時候，SEO實踐者也開始知道，如果網(wǎng)站能被目錄導(dǎo)航站(Directory)，特別是開放目錄ODP(Open Directory Project)收錄，將非常有助于搜索排名的提升。最知名的ODP是DMOZ(www. dmoz. org)，由尼克·斯冠塔河鮑勃·圖爾兩位Sun公司的工程師在1998年創(chuàng)辦，它是一個人工來收錄網(wǎng)站進行分類的目錄網(wǎng)站。在這點上，它的組成和Yahoo是一樣的。
不同的是，它是由全球的站主自己做編輯來維護的，而Yahoo是由專業(yè)編輯來維護的。關(guān)于DMOZ，搜索引擎青睞DMOZ，是因為經(jīng)過人工分析的網(wǎng)站的可信度自然要高于搜索引擎蜘蛛和機器人來獲取的網(wǎng)站信息可靠。
2001年的收費登錄大為紅火。搜索引擎市場經(jīng)歷大清洗，人們開始拋棄搜索引擎Hotbot，Alta Vista和Excite。Alta Vista試圖仿效Google方式來重新回到縮小版的搜索引擎，但是這個垂死掙扎非常痛苦地失敗了，并在2003年被Yahoo收購。Inktomi也失去了好幾個應(yīng)用伙伴，急劇走下坡路，2004年同樣被Yahoo收購，而且成為了Yahoo搜索的主要核心技術(shù)。
四、2002-2007年:Google Dance和SEO的不眠之夜
其實在2001年，敏感的站主和SEO實踐者感覺到了一個從未有過的現(xiàn)象。有些人對網(wǎng)站在Google上的排名一夜之間消失，而有的網(wǎng)站則名列首位。這個現(xiàn)象幾乎是每月一次。后來，人們知道，這就是Google定期地更新它的索引(Index)的距離活動，給人的感覺就像跳舞一樣，因此被SEO實踐者稱為Google Dance。
正是因為有Google Dance，每個SEO實踐者都在Google更新的那個晚上熬夜地看自己的SEO成果能否在Google上實現(xiàn)。每次更新有贏家和輸家，網(wǎng)上SEO論壇總有成千上萬的討論，期望知道下次更新能有什么可以預(yù)料的，或者猜測更新的具體日期。
搜索引擎在這個階段中遇到更嚴重的泛濫問題。SEO實踐者大量采用門戶網(wǎng)頁(Doorway Page)、重復(fù)網(wǎng)站(Duplicate Website)、偽裝網(wǎng)頁(Cloaked Page)、隱藏鏈接(Hidden Links)等來試圖欺騙Google。另外，DMOZ被Google作為一個重要的收錄新網(wǎng)站的渠道，DMOZ也被注入許多垃圾網(wǎng)站。
2002年是大量SEO被濫用的一年。但是，搜索引擎從這些與SEO非法實踐的斗爭中不斷豐富自己的辨別技術(shù)，對抓住的網(wǎng)站拒絕收錄，已經(jīng)收錄的則給予剔除。但是這個封鎖也冤枉了不少誠實的SEO網(wǎng)站。
在中國，百度于2001年9月開始提供公共搜索服務(wù)，并成功地使搜狐和新浪開始使用它的搜索技術(shù)。同時，它還提供新聞搜索服務(wù)，迅速擴大用戶群。
2003年，越來越多的網(wǎng)站設(shè)計對Flash的應(yīng)用有了謹慎的態(tài)度。這一年也是搜索引擎繼續(xù)反擊垃圾泛濫的一年。許多SEO實踐者明白黑帽技術(shù)(black-hat)已經(jīng)行不通，而是要扎扎實實地真正提高網(wǎng)站的素質(zhì)。
Google在2003年更是擠掉了AltaVista和Inktomi，成為獨大。Google誕生于一個搜索引擎紛雜的時代，在那個時代，像Alta Vista等搜索引擎對自己的市場份額太具信心而懶得變化。Google由各個站主和SEO實踐者宣揚，從而一舉后來居上。Google開始反擊垃圾泛濫，矛頭直接對向曾經(jīng)支持它的這些站主和SEO實踐者。這些人成了Google成功的犧牲品。
2003年的Google的"佛羅里達更新"(Florida Update)真是讓全世界的站主領(lǐng)教了Google的厲害。倘若強烈颶風(fēng)一般，F(xiàn)lorida Update一夜之間讓千萬個網(wǎng)站從搜索中消失或者從前十名刮到100頁以后。這個發(fā)生在11月16日的更新，尤其對寄希望在即將來臨的圣誕節(jié)狠賺一筆的電子商務(wù)網(wǎng)站損失慘重。Google的這個更新是反擊垃圾網(wǎng)站和不法SEO行為的一次重要戰(zhàn)役。
然而，由于使用的過濾器(filter)不完美，沖擊了很多無辜網(wǎng)站。之所以叫"佛羅里達更新"，是因為這個更新由Google在佛羅里達的數(shù)據(jù)中心開始的。
之后，2004年1月叫做"Austin Update"的余波同樣也對相當多的網(wǎng)站造成沖擊。霎時間，所有SEO實踐者都突然搖身變成了Google Adwords的專家，大家不能不依靠Google廣告來維持這段節(jié)日期間的銷售。
關(guān)于這兩個歷史性的Google更新，給了許多SEO實踐者相當大的教訓(xùn)。規(guī)規(guī)矩矩地從改善網(wǎng)站本身的素質(zhì)而不是投機取巧，成為了SEO唯一可行的方法。PPC也穩(wěn)定的成為營銷策略中的重要手段，而SEO也成為搜索引擎營銷(SEM)的一部分。
Yahoo在這個時候決定與Google正式分道揚鑣。長久以來，為了彌補自己靠人工收錄網(wǎng)站的不足，Yahoo一直采用Google的技術(shù)來提供網(wǎng)絡(luò)搜索。Yahoo顯示陸續(xù)購入Alta Vista，AllTheWeb和Inktomi公司，讓人覺察到Y(jié)ahoo的心情--它是否間接養(yǎng)大了Google?它的手上還有20%Google的股份!終于，在2004年2月16日，Yahoo出售了Google股份，正式告別Google，走上自己開發(fā)搜索引擎的道路。
同年，2004年9月12日，Google推出簡體及繁體兩種中文版本的搜索引擎。
進入2005年，最大的變化是Google Update不再是定期的活動，而是逐漸地成為每天的遞進更新。劇烈的變化不再看見。SEO實踐者能夠很快看到自己的努力是否出現(xiàn)了效果。遵循搜索引擎的紀律，以合理的方法來調(diào)整、提高網(wǎng)站的結(jié)構(gòu)和內(nèi)容，成為唯一能夠保證網(wǎng)站穩(wěn)定的方法。更重要的是，遵循這些規(guī)范操作而優(yōu)化的網(wǎng)站，不僅在Google上排名良好，還會在Yahoo和MSN上也具有不錯的結(jié)果。中文網(wǎng)站，如果扎實地做好網(wǎng)站的素質(zhì)，也會在百度的排名上獲益。
