18岁成年网站,人人爱人人艹,亚洲情se,黑丝一区

熱烈慶祝南京國際服務(wù)外包企業(yè)協(xié)會網(wǎng)站成功改版! 2013.9.16

行業(yè)研究

互聯(lián)網(wǎng)企業(yè)大佬們的自研數(shù)據(jù)中心之路

發(fā)布時間:2014-02-28 點擊次數(shù):2950

計算機


 

 2000年以后,我們進入了互聯(lián)網(wǎng)時代。在這個世界上涌現(xiàn)出了一批優(yōu)秀的互聯(lián)網(wǎng)企業(yè),比如國外的Google、Facebook,國內(nèi)的百度、阿里巴巴、騰訊等。這些互聯(lián)網(wǎng)大佬依托于互聯(lián)網(wǎng)技術(shù)發(fā)家,自然對自己賴以生存的數(shù)據(jù)中心非常重視。Google每年投入到數(shù)據(jù)中心建設(shè)的費用高達數(shù)億美元,在2013年投入超過了10億美元。Facebook也不甘落后,在世界各地建設(shè)新的數(shù)據(jù)中心。國內(nèi)的企業(yè)也在布局自己的數(shù)據(jù)中心,2013年,百度在內(nèi)蒙進行了大型數(shù)據(jù)中心建設(shè),騰訊的天津特大型數(shù)據(jù)中心建設(shè),都耗資數(shù)億。全世界的數(shù)據(jù)量都在成倍地增長,互聯(lián)網(wǎng)企業(yè)要想保持高速增長,就必須做大量的投入,購買數(shù)萬臺的服務(wù)器,數(shù)千臺的網(wǎng)絡(luò)設(shè)備,一個數(shù)據(jù)機房一周的時間就可以搭建完畢。流淌著的流量那就是金錢,誰的數(shù)據(jù)中心規(guī)模越龐大,誰就能掌握的流量越多,誰就將成為這個市場的王者。
  在經(jīng)過了近些年大刀闊斧的建設(shè)后,這些大佬們才意識到控制成本,一味的不考慮成本的投入顯然大大攤薄了獲得的凈利潤。只有自己對自己的數(shù)據(jù)中心建設(shè)意圖最了解,對采購進來的服務(wù)器、網(wǎng)絡(luò)設(shè)備、存儲設(shè)備等只做簡單的堆疊與互連,顯然無法充分發(fā)揮出最大的效能。有些大佬已經(jīng)開始意識到這樣的發(fā)展遲早會出現(xiàn)問題,會被競爭對手所超越,最好的數(shù)據(jù)中心并不是指有最多數(shù)量的服務(wù)器和網(wǎng)絡(luò)設(shè)備。
  互聯(lián)網(wǎng)企業(yè)的業(yè)務(wù)完全依托于集群服務(wù)器(指的是數(shù)百臺服務(wù)器因一個應(yīng)用同時工作),對服務(wù)器數(shù)量需求很大,隨著數(shù)據(jù)量增加,增加服務(wù)器是不可避免的。所以首先他們要控制采購服務(wù)器的數(shù)量,減少硬件采購成本,盡量通過軟件優(yōu)化提升性能?;ヂ?lián)網(wǎng)企業(yè)的技術(shù)人員整天和服務(wù)器打交道,所以對服務(wù)器非常了解,尤其許多涉及硬件的應(yīng)用設(shè)計還需要和服務(wù)器廠家的人合作完成,這就讓互聯(lián)網(wǎng)企業(yè)的人有機會接觸到服務(wù)器操作系統(tǒng)的底層實現(xiàn),這樣互聯(lián)網(wǎng)企業(yè)就有了自研服務(wù)器的技術(shù)基礎(chǔ)?,F(xiàn)在的服務(wù)器幾乎成為了標準設(shè)備,硬件方面主要是CPU+內(nèi)存+硬盤+網(wǎng)卡,再安裝上免費的Linux操作系統(tǒng)就可以用了?;ヂ?lián)網(wǎng)企業(yè)顯然不愿意再掏大量的金錢去購買這些服務(wù)器,讓服務(wù)器廠家大賺一筆。于是他們開始自己研發(fā)服務(wù)器樣品,然后直接與代工廠合作,提供需要的服務(wù)器硬件指標,由代工廠生產(chǎn),這樣減少了采購環(huán)節(jié),節(jié)約了采購成本。在Google、Facebook的數(shù)據(jù)中心到處可見其自研的服務(wù)器設(shè)備,他們可以為了實現(xiàn)自己的應(yīng)用甚至去修改服務(wù)器的硬件設(shè)置,讓服務(wù)器完全為應(yīng)用服務(wù),如果使用的是別人的服務(wù)器就很難實現(xiàn)。這種自研服務(wù)器為Google和Facebook的業(yè)務(wù)部署提供了方便,F(xiàn)acebook甚至還準備向外出售其設(shè)計的服務(wù)器產(chǎn)品。
  當然,凡事都有兩面性,服務(wù)器廠商專做服務(wù)器幾十年,顯然不是互聯(lián)網(wǎng)企業(yè)所能比擬的。雖然互聯(lián)網(wǎng)企業(yè)技術(shù)積累深厚,但畢竟不是專做服務(wù)器,所以他們自研的服務(wù)器僅限于低級應(yīng)用程序使用,服務(wù)器的性能和功耗等也無法與服務(wù)器廠商的設(shè)備相比?,F(xiàn)在服務(wù)器廠商的設(shè)備可以達到32核同時工作,硬盤數(shù)TB,內(nèi)存32G,這樣的高性能產(chǎn)品互聯(lián)網(wǎng)企業(yè)很知趣,還得乖乖地從外部采購,自研技術(shù)還不到家。就算是自研的服務(wù)器也不敢承載重要業(yè)務(wù),與服務(wù)器廠家設(shè)備在各種各樣應(yīng)用環(huán)境中得到磨練相比,自研服務(wù)器的穩(wěn)定性還不足,一旦承載的業(yè)務(wù)出問題,有苦只能往自己肚子里咽,如果是使用的是服務(wù)器廠商的,還可以向服務(wù)器廠商討要損失。所以服務(wù)器自研之路并不是那么好走的,只能是互聯(lián)網(wǎng)大佬的一個嘗試,想完全自給自足,還有很長的路要走。
  國內(nèi)幾個互聯(lián)網(wǎng)大佬們也沒有閑著,自研服務(wù)器對他們有點難度,畢竟中國接觸服務(wù)器的時間有點晚,掌握到服務(wù)器設(shè)計技術(shù)的人才較少,服務(wù)器技術(shù)的發(fā)展遠低于國外,于是他們將觸角引向了網(wǎng)絡(luò)設(shè)備。百度和騰訊早在自己的數(shù)據(jù)中心里部署了自研的網(wǎng)絡(luò)設(shè)備。這些互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)并不復(fù)雜,普遍內(nèi)部采用的是大二層網(wǎng)絡(luò),匯聚層有幾臺三層設(shè)備就可以了,基本沒有復(fù)雜的協(xié)議運行,OSFP是其最喜歡的三層協(xié)議,二層聚合互連是其最喜歡的二層協(xié)議,這樣的數(shù)據(jù)中心為了實現(xiàn)服務(wù)器互連需要數(shù)千臺的二層網(wǎng)絡(luò)設(shè)備,所以他們每年采購二層網(wǎng)絡(luò)設(shè)備數(shù)量僅次于服務(wù)器數(shù)量,價格不菲。二層網(wǎng)絡(luò)設(shè)備硬件組成主要有轉(zhuǎn)發(fā)芯片+CPU+內(nèi)存,轉(zhuǎn)發(fā)芯片可以完成二層轉(zhuǎn)發(fā)功能,只要通過軟件調(diào)試讓這些芯片協(xié)調(diào)工作起來即可,所以相比服務(wù)器,二層網(wǎng)絡(luò)設(shè)備更為容易自研,現(xiàn)在的百度已經(jīng)完全實現(xiàn)了二層網(wǎng)絡(luò)設(shè)備自己自足。由于受技術(shù)積累所限,三層以上的網(wǎng)絡(luò)設(shè)備還需要從外部采購,騰訊也采用的這種模式。同樣,采用自研設(shè)備受限于自身技術(shù)積累不足,掌握不好反而達不到節(jié)省成本的目的,2013年年底的這次騰訊QQ業(yè)務(wù)大斷網(wǎng)就是其自研設(shè)備惹的禍,這次故障給騰訊帶來了非常不好的聲譽,所以過于大膽采用自研設(shè)備就意味著風險增加,就目前互聯(lián)網(wǎng)的技術(shù)積累而言,步子還是不要邁的太大。
  數(shù)業(yè)有專攻,互聯(lián)網(wǎng)企業(yè)本質(zhì)還是基于數(shù)據(jù)中心做應(yīng)用的,并不是專業(yè)的數(shù)據(jù)中心提供商,走自研之路可以給互聯(lián)網(wǎng)節(jié)約成本,更加具有競爭優(yōu)勢,值得學習。但除非有雄厚的技術(shù)積累,成熟的應(yīng)用,才可以走自研之路。就現(xiàn)行的技術(shù)發(fā)展水平而言,互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)中心自研僅能作為其數(shù)據(jù)中心建設(shè)的一個必要補充,成不了主流,更不會是全部。對于中小型的互聯(lián)網(wǎng)企業(yè)而言,就不要自研了,聚焦自己業(yè)務(wù),否則會得不償失。

上一條:云計算也玩無邊界化看Windows Azure看法 下一條:暫無