盘点技术史:流量运营(PC 时代)
前言:
提到流量運(yùn)營的歷史,我們首先需要簡單介紹一下互聯(lián)網(wǎng)的歷史。人類最偉大的構(gòu)想往往都需要幾代人不斷地嘗試和完善,蒸汽機(jī)如此,飛行器如此,攻克癌癥也將如此。從1876年貝爾發(fā)明了電話起,整個20世紀(jì)人類都在不斷嘗試如何遠(yuǎn)距離傳輸除語音以外的信息或者數(shù)據(jù),從20世紀(jì)初特斯拉即已經(jīng)有了互聯(lián)網(wǎng)的構(gòu)想,同時Otlet等一大批先驅(qū)在不斷探索和完善信息的數(shù)字化存儲和讀寫技術(shù),1960年MIT教授Licklider提出了“IntergalacticComputerNetwork”即IGCN理論,為現(xiàn)代互聯(lián)網(wǎng)概念奠定了基礎(chǔ)。直到1990年,現(xiàn)代互聯(lián)網(wǎng)才真正誕生,英國人TimBerners-Lee提出并成功實(shí)現(xiàn)了基于客戶端和服務(wù)端之間通信的HTTP協(xié)議。
流量分析只比互聯(lián)網(wǎng)誕生晚幾年,作為一個生態(tài),互聯(lián)網(wǎng)需要有人提供服務(wù),同時也需要有人消費(fèi)服務(wù),而在互聯(lián)網(wǎng)上經(jīng)營服務(wù)跟在線下經(jīng)營五金店一樣,如果想要成功,需要時刻關(guān)注來訪問的顧客的情況:今天有多少人來消費(fèi)?有多少人來了但是沒有購買?我的顧客有一些什么特點(diǎn)?為什么今天的銷售額比昨天少了很多?
1993年,在互聯(lián)網(wǎng)誕生3年后,全世界有大約600個網(wǎng)站,如果你有幸成為這600個提供互聯(lián)網(wǎng)服務(wù)的網(wǎng)站主之一,要回答這些問題就沒有這么容易了,首先你面對的是你的服務(wù)器上的一大堆服務(wù)請求日志,大概長成這樣:
如果你不是學(xué)計算機(jī)專業(yè)的,基本不大可能從成千上萬的日志中獲得任何有用的信息。有了痛點(diǎn)自然就有解決痛點(diǎn)的產(chǎn)品誕生。此時,歷史的潮流將一家叫WebTrends的公司推向了沙灘,這家公司今天依然存在,當(dāng)然技術(shù)上早就與時俱進(jìn)了。然而,在1993年,它僅僅為網(wǎng)站主提供了一個簡單服務(wù)端日志解析和分析的服務(wù),可以認(rèn)為就是設(shè)計了一個grep語句將這些日志的IP地址信息提取出來去重,然后告訴網(wǎng)站主今天有多少人訪問了網(wǎng)站。這家公司因?yàn)檫@個idea在2001年賣了11億美元,同時這個idea催生了一個叫digital analytics(流量分析)的行業(yè)的誕生,并且每年產(chǎn)生上千億美元的revenue。
# 劃重點(diǎn)的1995年
1995年是互聯(lián)網(wǎng)發(fā)展的重要一年,Amazon, Craigslist, eBay領(lǐng)頭的電子商務(wù)開始進(jìn)入互聯(lián)網(wǎng),Match.com也將社交需求帶到了網(wǎng)上,Yahoo在之前一年已經(jīng)上線,隨著互聯(lián)網(wǎng)服務(wù)的日益豐富和多樣化,Windows 95的火爆登場,個人電腦大賣,網(wǎng)民數(shù)量也出現(xiàn)了爆炸式增長,WebTrends已經(jīng)無法滿足大的網(wǎng)站主洞察客戶的需求。
此時誕生了Analog,一款免費(fèi)的流量分析工具,并且提供一定的可視化分析能力。當(dāng)然,到目前為止,互聯(lián)網(wǎng)網(wǎng)頁還是以靜態(tài)頁面為主,如果一個用戶訪問了某網(wǎng)頁,我們可以認(rèn)為他訪問了整個網(wǎng)頁的所有內(nèi)容,現(xiàn)在我們知道,這個假設(shè)很快就變成了不對的。
1996年,專業(yè)的互聯(lián)網(wǎng)市場營銷團(tuán)隊(duì)開始出現(xiàn)在一些大公司的組織架構(gòu)中,他們可以熟練使用Analog這款免費(fèi)工具,然而免費(fèi)的工具在沒有營收的支撐下總是難以滿足高階用戶的需求。此時更多的玩家進(jìn)入了流量分析領(lǐng)域,幫助網(wǎng)站主洞察流量和挖掘客戶價值,大的網(wǎng)站主也開始大量投資購買流量分析軟件對服務(wù)端日志進(jìn)行分析。此時流量分析的四巨頭出現(xiàn):WebTrends, Web-counter, Accrue, Omniture。其中Web-counter開創(chuàng)了一種廣為人知的的hit counter service, 它反向?yàn)橹?#xff0c;針對中小網(wǎng)站主和在免費(fèi)host網(wǎng)站host網(wǎng)頁的個人網(wǎng)站主(他們沒有讀取服務(wù)端日志的權(quán)限),國內(nèi)的80后互聯(lián)網(wǎng)使用者可能并不陌生。
它的劃時代意義在于讓所有的網(wǎng)站主都可以做最直觀的流量洞察,真正讓流量分析做到了零門檻,網(wǎng)站主不需要懂如何讀取服務(wù)端日志、不需要懂日志管理、不需要懂日志解析,只需要在網(wǎng)站里面嵌入一段簡單的PHP代碼即可。當(dāng)然它沒有fancy的分析功能,也沒有任何過濾爬蟲的能力。
Google上線的1997年
1997年,互聯(lián)網(wǎng)持續(xù)迭代發(fā)展,此時的網(wǎng)站開始注重美觀,各種精裝修技術(shù)開始盛行,動態(tài)加載的網(wǎng)頁技術(shù)開始出現(xiàn),服務(wù)端請求的次數(shù)跟網(wǎng)頁的瀏覽次數(shù)也基本沒有任何關(guān)聯(lián)了,服務(wù)端日志分析已經(jīng)不能精確地洞察用戶行為。此時一種新的用戶行為追蹤技術(shù)誕生,叫做Javascript Tagging。它可以精確地追蹤復(fù)雜網(wǎng)頁的用戶訪問行為,tag原來是指網(wǎng)絡(luò)請求的那張看不見的照片,它被有意嵌入在網(wǎng)頁內(nèi)的某興趣點(diǎn),當(dāng)指定的用戶行為被觸發(fā)時會向服務(wù)器請求這張圖片資源,順便將相關(guān)的用戶信息隨著請求帶上去。隨著網(wǎng)頁技術(shù)的發(fā)展,現(xiàn)在tag是指一段用來追蹤用戶行為的復(fù)雜的Javascript代碼。除了能夠進(jìn)行更加細(xì)粒度的頁面元素追蹤外,tag還能收集到更加復(fù)雜的內(nèi)容,比如購物車內(nèi)的商品信息、屏幕有多大、使用了什么瀏覽器、視頻看了多少 等等。
值得注意的是,google.com在這一年上線,之后十幾年互聯(lián)網(wǎng)技術(shù)的重大發(fā)展基本跟它有點(diǎn)關(guān)系。
這家公司最初在1995年創(chuàng)立,進(jìn)入前面提到的基于服務(wù)端日志解析的流量分析服務(wù),1997年開始發(fā)展Javascript tagging技術(shù),到1998年,JS tagging還是將日志發(fā)送到業(yè)務(wù)服務(wù)端進(jìn)行日志分析為主,其主要原因是各大互聯(lián)網(wǎng)公司都已經(jīng)投入大量資金購買流量分析軟件,成本的壓力讓這些公司暫時還不考慮轉(zhuǎn)型,此時最大的軟件提供商就是Urchin,但是同時一種新的商業(yè)模式開始誕生,網(wǎng)站的流量數(shù)據(jù)不再發(fā)到自己的服務(wù)器,而是發(fā)送給專業(yè)的流量分析服務(wù)商管理的服務(wù)器,流量分析開始SaaS化,這種解決方案在中小企業(yè)中非常流行,同時大的host公司(為中小企業(yè)或者個人提供網(wǎng)站托管服務(wù))也對此趨之若鶩。新的商業(yè)模式結(jié)合了流量分析的易用性和功能性,讓Urchin成長成為了最大的流量分析服務(wù)提供商,并于2005年賣給了Google,成為了Google Analytics。
接下來從2005年到現(xiàn)在,流量分析從主流的Page View過渡到了in-page analytics, 再到Universal Analytics(移動互聯(lián)網(wǎng)的興起),再到各種縱深流量分析和運(yùn)營能力構(gòu)建(cross-site、machine learning、lifetime value等),流量運(yùn)營出現(xiàn)了百家爭鳴的業(yè)態(tài)。
三大門戶和導(dǎo)航站的黃金十年
1994年4月20日是中國互聯(lián)網(wǎng)發(fā)展史上開天辟地的大日子,通過一根64Kb(注意是bit不是Byte)的國際專線,中關(guān)村地區(qū)教育與科研示范網(wǎng)絡(luò)(NCFC)工程完成了與國際互聯(lián)網(wǎng)的全功能IP連接。這一年5月中國科學(xué)院高能物理研究所設(shè)立了國內(nèi)第一臺WEB服務(wù)器“中國之窗”,服務(wù)于科研與教育的互聯(lián)網(wǎng)用戶主要是北京的科研院所和高校的人員。
隨后兩年多時間里,中國科技網(wǎng)(CSTNET)、中國公用計算機(jī)互聯(lián)網(wǎng)(CHINANET)、中國教育和科研計算機(jī)網(wǎng)(CERNET)等相繼開工建設(shè),開始了全面鋪設(shè)中國信息高速公路的歷程。1996年中國第一個網(wǎng)吧(電腦室)在上海出現(xiàn),上網(wǎng)價格達(dá)40元/小時,上網(wǎng)沖浪只能是少數(shù)人的高科技休閑方式。1997年中國電信面向普通家庭推出價格較為低廉的163網(wǎng)(很容易猜到后來網(wǎng)易選用163.com作為域名的緣由)和169網(wǎng),全國各地的網(wǎng)吧如雨后春筍般涌現(xiàn)。1998年中國網(wǎng)民開始成幾何級數(shù)增長,上網(wǎng)從前衛(wèi)變成一種真正的需求,一場互聯(lián)網(wǎng)帶來的變革很快傳遍整個中華大地。
隨著上網(wǎng)的普及,提供上網(wǎng)內(nèi)容的ISP也越來越多,但以復(fù)制海外的模式為主,美國出現(xiàn)什么新網(wǎng)站,中國會很快拷貝過來,一開始目標(biāo)肯定是精英,3年后才會真正開始爆發(fā)流行。這個階段逐步誕生了占據(jù)中國互聯(lián)網(wǎng)黃金十年的三大門戶:網(wǎng)易、搜狐、新浪。這里不展開介紹它們的業(yè)務(wù)發(fā)展和上市歷程,從流量運(yùn)營角度我們來看導(dǎo)航站和中國站長的發(fā)展,他們成為這個時代中國互聯(lián)網(wǎng)的特色之一。
在互聯(lián)網(wǎng)網(wǎng)站鼻祖雅虎剛上線時,以網(wǎng)站分類導(dǎo)航的形式提供內(nèi)容服務(wù),后來逐漸發(fā)展成搜索、門戶等產(chǎn)品。同樣得入口者得天下,中國互聯(lián)網(wǎng)也出現(xiàn)了簡單到基本不需要技術(shù)的導(dǎo)航站,這與中國網(wǎng)吧和網(wǎng)民特點(diǎn)密不可分。1999年還是網(wǎng)吧管理員的李興平,發(fā)現(xiàn)找資料很困難,而且要記住英文網(wǎng)址難度很大,他就把中國排名前5000位的站點(diǎn)進(jìn)行分門別類,再按用途組合在一起,做成一個“網(wǎng)址大全”式的網(wǎng)站,這就是hao123網(wǎng)址之家的前身。他要逐個檢查鏈接,去除死鏈和非法鏈接、調(diào)整鏈接排序,工作耗時逐漸增長到每天需要6-7個小時,這就是中國站長的早期人工流量運(yùn)營。
2004年hao123成為眾多網(wǎng)吧和家用電腦的開機(jī)首頁,甚至在全球權(quán)威的Alexa網(wǎng)絡(luò)監(jiān)測中,成為全球流量極大的中文網(wǎng)站之一。根據(jù)百度的統(tǒng)計,來自hao123的搜索請求廣告占到整個百度的搜索量的1/10,而整個網(wǎng)站流量能占到百度的40%,因此這一年百度斥資1000多萬現(xiàn)金加股票收購了hao123。蔡文勝創(chuàng)辦的比hao123晚了4年的265.com也在2007年賣給的谷歌中國。
隨著這兩家被收購,網(wǎng)址導(dǎo)航的盈利模式被認(rèn)可,進(jìn)入了群雄爭鹿的高速發(fā)展期,360依靠海量的安全衛(wèi)士和瀏覽器裝機(jī)量捆綁推廣360網(wǎng)址導(dǎo)航,瞬間擠入了網(wǎng)址導(dǎo)航的第二陣營,2345依靠與熱門網(wǎng)絡(luò)應(yīng)用捆綁以及強(qiáng)大的地推資源迅速崛起,114啦依靠與自身雨林木風(fēng)盜版系統(tǒng)推廣結(jié)合也獲得大量的用戶,隨后的搜狗、QQ也都相繼推出了自身的導(dǎo)航網(wǎng)站,網(wǎng)址導(dǎo)航逐漸成為各大公司的標(biāo)配流量入口。
站長三件套:域名、空間、統(tǒng)計代碼
言歸正傳,在沒有云計算和大數(shù)據(jù)的時代,搭建和運(yùn)營網(wǎng)站的門檻卻是極低的。國內(nèi)出現(xiàn)了很多提供價格低廉設(shè)置免費(fèi)的個人空間和二級域名服務(wù)的網(wǎng)站,催生了一大批站長,提供各式各樣的論壇和網(wǎng)站。他們開始學(xué)習(xí)如何用asp、php、html和css來裝修完善自己的網(wǎng)站。比如提供統(tǒng)計服務(wù)的就有熱訊統(tǒng)計,itsun等,其中在站長服務(wù)中最有名的當(dāng)屬網(wǎng)易了,提供了免費(fèi)域名、主頁空間、易數(shù)統(tǒng)計整套方案,雖然有廣告但做個初級網(wǎng)站還是非常容易。網(wǎng)易這家公司讓人佩服的是,每個時代都能低調(diào)做出符合用戶需求的產(chǎn)品,諸如門戶、163郵箱、夢幻西游、網(wǎng)易云音樂、考拉海購都成功收獲大批用戶。
基礎(chǔ)設(shè)施有了,如何提升網(wǎng)站訪問量成了站長們關(guān)心的首要問題。在搜索引擎流量未成為主流時,統(tǒng)計排行榜和換量聯(lián)盟(太極鏈、51link等)是站長們關(guān)注的重點(diǎn)。甚至在2005年蔡文勝舉辦的第一屆中國站長大會上,站長們交流網(wǎng)站流量運(yùn)營經(jīng)驗(yàn)的同時,也在交流在各個平臺刷量的葵花寶典,可見中國站長對商業(yè)化和盈利的渴望。
來源分析和關(guān)鍵詞分析
這個時期的統(tǒng)計分析工具,已經(jīng)進(jìn)入了基于服務(wù)器日志解析的流量分析的技術(shù)架構(gòu),除了統(tǒng)計網(wǎng)頁P(yáng)V、UV的這些基礎(chǔ)指標(biāo)外,做網(wǎng)站運(yùn)營最關(guān)注的就是流量來源。通過用戶來源網(wǎng)站統(tǒng)計,可以了解用戶來自哪個網(wǎng)站的推薦、哪個網(wǎng)頁的鏈接,如果是通過搜索引擎檢索,可以看出是來自哪個搜索引擎、使用什么關(guān)鍵詞進(jìn)行檢索,以及你的網(wǎng)站索引出現(xiàn)在搜索結(jié)果的第幾頁第幾項(xiàng)。這些分析對于站長去做SEO尤為重要,所以這里展開介紹一下來源和關(guān)鍵詞分析的技術(shù)原理。
通常有兩種技術(shù)來實(shí)現(xiàn)來源分析,一種方案在來源頁面鏈接加自定義參數(shù)來標(biāo)注用戶來源,比如在hao123首頁點(diǎn)擊百度連接后會打開baidu.com/?,tn參數(shù)就是標(biāo)識來源的字段。
另一種方案通過http header中的referer作為來源,比如你在百度搜索網(wǎng)站hao123(記為鏈接A:baidu.com/s?),點(diǎn)擊跳轉(zhuǎn)后,hao123的首頁(記為鏈接B:hao123.com/)就可以通過document.referer來獲取來源為(記為鏈接C:baidu.com/link?)。
前一種比較適合在網(wǎng)站內(nèi)部頁面跳轉(zhuǎn)中來使用,因?yàn)樾枰衼碓炊技由舷鄳?yīng)參數(shù);第二種更適合分析站外流量來源,往往referer的url參數(shù)會比較長,分析來源網(wǎng)站會截取域名段,分析來源頁面時通常會取?之前的靜態(tài)URL。理論上鏈接A就是B可以獲取到的referer,也是說A=C,這樣B就可以分析來源于搜索引擎的關(guān)鍵詞了(A鏈接中帶了搜索關(guān)鍵詞“wd=hao123”),這就是統(tǒng)計分析產(chǎn)品中提供關(guān)鍵詞分析的基本原理。但實(shí)際上A和C差異很大,這是為什么呢?懂點(diǎn)瀏覽器知識的觀察下就明白,其實(shí)在鏈接A頁面上點(diǎn)擊時并沒有直接跳轉(zhuǎn)到鏈接B,而是加了跳轉(zhuǎn)中間頁鏈接C,鏈接C也是百度的網(wǎng)頁,可以很靈活地控制URL中攜帶的參數(shù),屏蔽目標(biāo)網(wǎng)頁C做關(guān)鍵詞分析。
Google早在2011年推廣搜索https化時開始屏蔽來源關(guān)鍵詞分析,國內(nèi)的百度是在2015年發(fā)布公告正式取消referer中關(guān)于關(guān)鍵詞的顯示,宣稱此舉能夠更好的保護(hù)站點(diǎn)流量關(guān)鍵詞數(shù)據(jù)信息,使站點(diǎn)數(shù)據(jù)更加私密化。私密化的結(jié)果是你只能在百度統(tǒng)計分析中看到關(guān)鍵詞分析,你懂的:)
CNZZ和百度統(tǒng)計崛起
2005年后谷歌的Google Analytics和雅虎量子統(tǒng)計逐步進(jìn)入中國,站長們見識了國際一流公司的產(chǎn)品。但技術(shù)實(shí)力不是占領(lǐng)市場的第一要素,有時體驗(yàn)更重要,由于國際化的產(chǎn)品設(shè)計理念,加上糟糕的中文翻譯質(zhì)量,給了國內(nèi)流量分析產(chǎn)品不少機(jī)會。國內(nèi)的創(chuàng)業(yè)者逐漸推出了51la、51yes、cnzz等中國第二代流量分析產(chǎn)品,也提供了實(shí)時在線用戶統(tǒng)計等差異化的功能。這個時期很多站長會同時集成Google Analytics和國內(nèi)流量分析工具,使用各平臺的特色功能的同時也可以核對各平臺數(shù)據(jù)是否一致。后來51la、51yes由于服務(wù)穩(wěn)定性一直被詬病,廣告過多和產(chǎn)品功能規(guī)劃不明確,逐漸被cnzz拉開差距。cnzz將自己定位為專業(yè)、權(quán)威、客觀的第三方數(shù)據(jù)統(tǒng)計,這迎合了國內(nèi)互聯(lián)網(wǎng)市場的巨大需求,到2008年上線4年的cnzz獲得了60多萬的站點(diǎn)用戶,當(dāng)時據(jù)CNNIC統(tǒng)計國內(nèi)網(wǎng)站數(shù)量在192萬,意味著cnzz已經(jīng)覆蓋了國內(nèi)三分之一的站點(diǎn)。
百度統(tǒng)計測試版在2007年11月發(fā)布,2009年8月發(fā)布正式版,商業(yè)公司提供的統(tǒng)計服務(wù)更加穩(wěn)定、安全、專業(yè),在2010年逐漸成型后一統(tǒng)江湖,成為國內(nèi)流量分析工具百家爭鳴時代的終結(jié)者。隨著國家工信部加強(qiáng)對域名和內(nèi)容的備案審查,中小站長開始衰落,cnzz市場份額也逐步降低,網(wǎng)站流量分析工具也跨入被搜索引擎寡頭(百度、Google)統(tǒng)治的時代。
移動互聯(lián)網(wǎng)興起,移動統(tǒng)計分析迅速崛起,Flurry和友盟在中美各領(lǐng)風(fēng)騷,TalkingData、神策、阿拉丁等后期之秀異軍突起。
參考文獻(xiàn):
a-brief-history-of-web-analytics
the-early-days-of-web-analytics
leadforensics.com/web-a
en.wikipedia.org/wiki/N
en.wikipedia.org/wiki/P
en.wikipedia.org/wiki/T
https://en.wikipedia.org/wiki/IntergalacticComputerNetwork
en.wikipedia.org/wiki/J
en.wikipedia.org/wiki/W
en.wikipedia.org/wiki/A
en.wikipedia.org/wiki/W
leadforensics.com/web-a
en.wikipedia.org/wiki/G
en.wikipedia.org/wiki/U
media.people.com.cn/n/2
old.geekpark.net/topics
http://web.archive.org
pcworld.idg.com.au/arti
iheima.com/article-1481
williamlong.info/archiv
sohu.com/a/32682577_235
meiwen.org/article/7854
?
數(shù)據(jù)中臺是企業(yè)數(shù)智化的新基建,阿里巴巴認(rèn)為數(shù)據(jù)中臺是集方法論、工具、組織于一體的,“快”、“準(zhǔn)”、“全”、“統(tǒng)”、“通”的智能大數(shù)據(jù)體系。目前正通過阿里云數(shù)據(jù)中臺解決方案對外輸出,包括零售、金融、互聯(lián)網(wǎng)、政務(wù)等領(lǐng)域,其中核心產(chǎn)品有:
- Dataphin,一站式、智能化的數(shù)據(jù)構(gòu)建及管理平臺;
- Quick BI,隨時隨地 智能決策;
- Quick Audience,全方位洞察、全域營銷、智能增長;
- Quick A+, 跨多端全域應(yīng)用體驗(yàn)分析及洞察的一站式數(shù)據(jù)化運(yùn)營平臺;
官方站點(diǎn):
數(shù)據(jù)中臺官網(wǎng)?https://dp.alibaba.com
原文鏈接
本文為云棲社區(qū)原創(chuàng)內(nèi)容,未經(jīng)允許不得轉(zhuǎn)載。
總結(jié)
以上是生活随笔為你收集整理的盘点技术史:流量运营(PC 时代)的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: AliExpress智能营销引擎大揭秘
- 下一篇: DDD as Code:如何用代码诠释领