在國(guó)外,SEO開展較早,那些專門從事SEO的技術(shù)人員被Google稱之為“Search Engine Optimizers”,簡(jiǎn)稱SEOs。由于Google是目前世界最大搜索引擎提供商,所以Google也成為了全世界SEOs的主要研究對(duì)像,為此Google官方網(wǎng)站專門有一頁介紹SEO,并表明Google對(duì)SEO的態(tài)度。 對(duì)于任何一家網(wǎng)站來說,要想在網(wǎng)站推廣中取得成功,搜索引擎優(yōu)化是最為關(guān)鍵的一項(xiàng)任務(wù)。同時(shí),隨著搜索引擎不斷變換它們的排名算法規(guī)則,每次算法上的改變都可能會(huì)讓一些排名很好的網(wǎng)站在一夜之間名落孫山,而失去排名的直接后果就是失去了網(wǎng)站固有的可觀訪問量。所以每次搜索引擎算法的改變,都會(huì)在網(wǎng)站之中引起不小的騷動(dòng)和焦慮。我們可以說,搜索引擎優(yōu)化也成了一個(gè)愈來愈復(fù)雜的任務(wù)。
搜索引擎優(yōu)化(SEO)不是突然出現(xiàn)的一個(gè)技術(shù),而是和搜索引擎同步發(fā)展起來的,兩者的關(guān)系雖然不能說是“矛和盾”的關(guān)系,但是可以肯定的是,因?yàn)橛蠸EO才使得搜索引擎技術(shù)能夠變得更完善。
雅虎誕生與SEO的誕生
一、1994-1997:雅虎誕生與SEO的誕生,1993年8月,Lycos推出了基于搜索機(jī)器人的數(shù)據(jù)發(fā)現(xiàn)技術(shù),并支持搜索結(jié)果相關(guān)性排序額,它還第一次讓搜索引擎能夠使用網(wǎng)頁自動(dòng)摘要。 1995年底,Alta Vista推出,由于它具備大量的新的搜索功能,深受大眾好評(píng),Alta Vista是第一個(gè)支持自然語言搜索,具備了基于網(wǎng)頁內(nèi)容分析、智能處理的能力,第一個(gè)實(shí)現(xiàn)高級(jí)搜索語法的搜索引擎(如AND,OR,NOR等),同時(shí)還能搜索新聞群組中的內(nèi)容,還能搜索圖片。 這一階段也是yahoo發(fā)展的初期階段,大多數(shù)人在這個(gè)時(shí)候?qū)λ阉鞑⒉皇煜?,也不太知道有搜索引擎這回事,但是對(duì)于yahoo,大多數(shù)人則有所了解,尋找網(wǎng)站就上Yahoo。所以,將你的網(wǎng)站送到Y(jié)ahoo是很必要的,在此階段,只要你的網(wǎng)站基本有個(gè)模樣,有一定的可看性,一般只要向Yahoo提交地址,72小時(shí)內(nèi)就能出現(xiàn)在Yahoo目錄上。Yahoo對(duì)所有的網(wǎng)站進(jìn)行人工歸類,一般是按照字母順序排列網(wǎng)站,自然開頭為“A”的網(wǎng)站排到開頭為“B”的前面,而有兩個(gè)A的網(wǎng)站,排在有A和B的網(wǎng)站前面,比如,American Airlines的網(wǎng)站不僅排在Bank of America的前面,而且也排在American Basketball Association前面。所以,大批網(wǎng)站就以追求A字來命名。這是搜索引擎優(yōu)化的雛形。這個(gè)邏輯和黃頁電話號(hào)碼的排名邏輯一樣。 在這一階段,Yahoo的欄目編輯們也在網(wǎng)上積極搜索新的網(wǎng)站,豐富他們的數(shù)據(jù)庫(kù),而他們的搜索都是人工的,最典型的方法就是從一個(gè)網(wǎng)站的鏈接去訪問另外一個(gè)網(wǎng)站。遇到一個(gè)好的網(wǎng)站,他們就給站主發(fā)電子郵件,歡迎站主登錄,而且都是免費(fèi)的。 這些Yahoo編輯訪問網(wǎng)站的行為和我們今天看到的搜索引擎蜘蛛和機(jī)器人的形式是一樣的孜孜不倦。有個(gè)Yahoo編輯這么關(guān)心你的網(wǎng)站,比你還著急登錄你的網(wǎng)站,而且一文不收,這個(gè)在今天是無法想象的。你的網(wǎng)站登錄后,你還可以隨時(shí)更改登錄的信息,一般72小時(shí)就得到了更新。 值得一提的是,雖然在這個(gè)時(shí)期中文網(wǎng)站很少,而且大多數(shù)是美國(guó)的中文網(wǎng)和在臺(tái)灣的網(wǎng)站,但是Yahoo顯然注意到中文網(wǎng)站的未來,而且迅速有個(gè)中文譯名“雅虎”,而這個(gè)不僅僅是因?yàn)樗膭?chuàng)始人是楊致遠(yuǎn)。 這一階段也是SEO的雛形時(shí)期。網(wǎng)上網(wǎng)下出現(xiàn)了一些論文,討論文字對(duì)應(yīng)、數(shù)據(jù)挖掘和對(duì)搜索引擎程序員的訪談。人們初步有了讓網(wǎng)頁內(nèi)容符合搜索引擎數(shù)據(jù)庫(kù)原理的模糊意識(shí)。同樣,將網(wǎng)站收錄到搜索引擎也是很容易的,你的網(wǎng)頁只要關(guān)鍵詞的使用達(dá)到一定密度就輕而易舉地排列在搜索引擎上了。 值得一提的是,搜索引擎InfoSeek首次做到每日更新。早晨八點(diǎn)你提交網(wǎng)站,下午就被收錄,第二天就能出現(xiàn)在搜索之中。正是因?yàn)檫@么快的更新和這么容易的提交到收錄,大量的站主開始變著法子頻繁登錄不同的網(wǎng)址,英文出現(xiàn)Spam這個(gè)詞來形容站主不負(fù)責(zé)地制造泛濫的垃圾,很快使這些搜索引擎吃不消。 所以,SEO從一開始就是黑白兩道開始的。白的,英文里是white-hat,就是按照能夠悟出的搜索引擎原理來合理地調(diào)整自己的網(wǎng)站,使搜索引擎能收錄并得到好的曝光。黑道,英文叫black-hat,這類優(yōu)化者仿佛是黑客,尋找搜索引擎的弱點(diǎn),力圖將混淆的信息強(qiáng)塞給搜索引擎,從而為真實(shí)的網(wǎng)站提高曝光機(jī)會(huì)。 這個(gè)時(shí)期,因?yàn)閺?qiáng)大的利潤(rùn)誘惑,成人網(wǎng)站可以說是帶頭去“黑”搜索引擎。所以SEO和搜索引擎從一開始就是愛和恨的關(guān)系,這個(gè)時(shí)期,收費(fèi)的網(wǎng)站優(yōu)化服務(wù)也開始在美國(guó)出現(xiàn)。 在中文搜索引擎領(lǐng)域,中國(guó)的起步其實(shí)并不晚。1996年8月成立的搜狐公司是最早參與做類似Yahoo的管理信息分類導(dǎo)航的網(wǎng)站,曾一度有“出門找地圖,上網(wǎng)找搜狐”的美譽(yù)。 這個(gè)時(shí)候,沒有人注意在斯坦福的一個(gè)宿舍里,兩個(gè)聰明的學(xué)生正在慢慢孕育一個(gè)令世界矚目的新型搜索引擎。他們發(fā)明了一個(gè)新的叫PageRank的理論,來重新塑造搜索引擎。這個(gè)新型搜索引擎就是現(xiàn)在的Google。
Google出現(xiàn)和SEO理論的浮現(xiàn)
二、1998-1999年:這一階段,美國(guó)的互聯(lián)網(wǎng)大會(huì)開始有一些關(guān)于網(wǎng)站優(yōu)化的文章發(fā)表。這些文章開始關(guān)注到鏈接流行度(Link Popularity)、名錄網(wǎng)站鏈接(Directory Listing)的意義。這段時(shí)間,搜索引擎也知道了需要限制人們的網(wǎng)站提交來防止垃圾網(wǎng)站的泛濫,于是開始組織反擊。 Alta Vista開始大規(guī)模剔除含有“我們來優(yōu)化”或者“我們來推廣”這類文字的網(wǎng)頁。SEO的實(shí)踐者開始意識(shí)到,要破解搜索引擎的原理越來越難。在1999年將一個(gè)網(wǎng)站提升到名要比在1998年難上十倍。搜索引擎開始更多關(guān)注鏈接流行度的意義。 Google也在1998年收到了第一張十萬美元的風(fēng)險(xiǎn)投資,搬出了斯坦福校園,正式命名為Google公司,域名也從google.stanford. edu變成google. com。這個(gè)新的搜索引擎衡量網(wǎng)站的重要性首次將鏈接流行度作為排名的標(biāo)準(zhǔn)之一。 1999年5月,英國(guó)的FAST公司推出ALLTheWeb搜索引擎。它的網(wǎng)頁搜索可利用ODP自動(dòng)分類,支持Flash和PDF文件搜索,支持多語言搜索,還提供新聞搜索、圖像搜索、視頻、MP3和FTP搜索,擁有極其強(qiáng)大的高級(jí)搜索功能。這么強(qiáng)大的功能使它成為最流行的搜索引擎之一。 這一階段的初期,搜索引擎也開始了多元化的進(jìn)程,開始設(shè)立多語種的網(wǎng)站,比如Alta Vista就率先開始了拉丁語的版本。臺(tái)灣中正吳升教授所領(lǐng)導(dǎo)的GAIS實(shí)驗(yàn)室于1998年1月創(chuàng)立了OpenFind中文搜索引擎。它是最早開發(fā)的中文智能搜索引擎,號(hào)稱能抓取全球最多的網(wǎng)頁并開始進(jìn)入英文搜索引擎。 1999年Google獲得了兩千五百萬的資金,開始全力發(fā)展,并且已經(jīng)在媒體處理50萬次搜索,這個(gè)投資也使Google再次搬家到舊金山——硅谷地區(qū)叫Palo Alto的城市。Google也開始結(jié)識(shí)合作伙伴,從AOL到Netscape不久,Google再次搬家到目前的全球總部依然是舊金山——硅谷叫Mountain View的城市。這時(shí)候的搜索引擎開始設(shè)法控制市場(chǎng),廣告廣泛地出現(xiàn)在搜索引擎上。這引起了許多搜索者的反感,因?yàn)榇蠹疫€是在用56KB modem上網(wǎng),大量的廣告使網(wǎng)站頁面出現(xiàn)的太慢。 Google發(fā)現(xiàn)了這個(gè)影響搜索步伐的致命的問題。簡(jiǎn)潔的網(wǎng)頁設(shè)計(jì)使眾人耳目一新,飛快地搜索速度更使得各個(gè)站主奔走相告,每個(gè)站主論壇都充滿了對(duì)Google的極好評(píng)價(jià),雜志的采訪也是接連不斷地對(duì)Google進(jìn)行推薦,Google的全面演出就正式登臺(tái)了。
百度的出現(xiàn)和搜索引擎的革新
從2000年開始,登錄一個(gè)網(wǎng)站到搜索引擎花的時(shí)間是越來越長(zhǎng)。搜索引擎熱衷于收費(fèi)服務(wù),從一個(gè)新的搜索引擎Inktomi到Alta Vista都染上了金錢。與此同時(shí),搜索者希望有一個(gè)搜索引擎能真正地給他們帶來有用的信息。Google沒有辜負(fù)人民的期望,它的精確搜索開始鞏固它在搜索引擎中的地位。 首先出局的是InfoSeek,這個(gè)InfoSeek在1998被迪士尼公司買下,變成Go. com。從那以后,InfoSeek被拋棄,而Go. com也使用Yahoo搜索來代替。在1999年,InfoSeek的一位華人工程師離開了這個(gè)搜索引擎而駛向北京,他力圖要?jiǎng)?chuàng)立一個(gè)“中國(guó)人自己”的搜索引擎,并且受一句中國(guó)古詞“眾里尋他千百度,驀然回首,那人卻在燈火闌珊處”的啟發(fā),將中國(guó)人的搜索引擎起名叫“百度”。這個(gè)工程師就是百度的創(chuàng)始人之一—李彥宏。 李彥宏自己就是新一代的搜索技術(shù)專家,他早在1996年就解決了如何將基于網(wǎng)頁質(zhì)量的排序與基于相關(guān)性排序完美結(jié)合的問題,并獲得美國(guó)專利。百度公司結(jié)合硅谷搜索引擎人才精英,依托北京最優(yōu)秀的軟件人才,開發(fā)了大型商業(yè)化的中文搜索引擎,中文搜索從此與英文搜索站在了同一起跑線上,同時(shí),百度搜索巧妙地解決了數(shù)據(jù)更新的瓶頸,整個(gè)中文網(wǎng)頁的數(shù)據(jù)庫(kù)可以最快每天更新一次。 2000年也是Flash動(dòng)畫、JavaScript特技Rollover和動(dòng)態(tài)圖片的流行之年。這些動(dòng)態(tài)的形式讓人喜愛,但是很少有人知道,搜索引擎不能認(rèn)識(shí)這些,搜索引擎只能閱讀文字,而非這些感官的創(chuàng)意,因?yàn)樗鼈円恢笔窃谀M人的閱讀方式,但是卻無法模擬人的感知,直到今天,搜索引擎也沒有解決這個(gè)問題。 從這一年開始,實(shí)際上,向搜索引擎呈交新的網(wǎng)站不需要按照以前那樣在搜索引擎的頁面上填寫“ADD URL”,搜索引擎已經(jīng)能從一個(gè)存在的網(wǎng)站上發(fā)現(xiàn)新網(wǎng)站的鏈接來訪問并收錄。在這個(gè)時(shí)候,SEO實(shí)踐者也開始知道,如果網(wǎng)站能被目錄導(dǎo)航站(Directory),特別是開放目錄ODP(Open Directory Project)收錄,將非常有助于搜索排名的提升。最知名的ODP是DMOZ(www. dmoz. org),由尼克·斯冠塔河鮑勃·圖爾兩位Sun公司的工程師在1998年創(chuàng)辦,它是一個(gè)人工來收錄網(wǎng)站進(jìn)行分類的目錄網(wǎng)站。在這點(diǎn)上,它的組成和Yahoo是一樣的。 不同的是,它是由全球的站主自己做編輯來維護(hù)的,而Yahoo是由專業(yè)編輯來維護(hù)的。關(guān)于DMOZ,搜索引擎青睞DMOZ,是因?yàn)榻?jīng)過人工分析的網(wǎng)站的可信度自然要高于搜索引擎蜘蛛和機(jī)器人來獲取的網(wǎng)站信息可靠。 2001年的