數(shù)據(jù)中心經(jīng)歷了多次變革,從最早作為計(jì)算機(jī)/大型機(jī)運(yùn)行環(huán)境,到互聯(lián)網(wǎng)時(shí)代作為帶寬入口,再到現(xiàn)在成為智慧星球云計(jì)算引擎。數(shù)據(jù)中心的應(yīng)用需求也在不斷演變,最初關(guān)注溫濕度和動(dòng)力等可用性可靠性指標(biāo),后來把數(shù)據(jù)中心進(jìn)行業(yè)務(wù)分區(qū),分為業(yè)務(wù)網(wǎng)、管理網(wǎng),再到現(xiàn)在要求數(shù)據(jù)中心融合地理位置、土建、機(jī)房、服務(wù)器,形成綜合的云計(jì)算平臺(tái)。數(shù)據(jù)中心逐漸從配套的邊緣走向業(yè)務(wù)的核心,開始成為最終用戶ICT建設(shè)的關(guān)注焦點(diǎn)。
傳統(tǒng)數(shù)據(jù)中心建設(shè)的項(xiàng)目性規(guī)劃、設(shè)計(jì)、實(shí)施、驗(yàn)收的方法無法滿足云計(jì)算彈性、廉價(jià)、可管控的技術(shù)要求。已有多個(gè)數(shù)據(jù)中心建成后根本滿足不了業(yè)務(wù)發(fā)展和ICT技術(shù)發(fā)展的需求,導(dǎo)致需要不斷重新建設(shè);另一方面,正在建設(shè)中的數(shù)據(jù)中心的能耗、造價(jià)、工期總在不斷變動(dòng),過程難以控制;甚至,已投入運(yùn)營(yíng)的數(shù)據(jù)中心,由于運(yùn)行狀態(tài)無法獲取,常常發(fā)生服務(wù)器要上線,卻不知要放在哪臺(tái)機(jī)架上的情況,由于對(duì)耗能、耗水、人工投入、設(shè)備可用性狀態(tài)不清晰,傳統(tǒng)數(shù)據(jù)中心運(yùn)維長(zhǎng)期處于盲目而低效的狀態(tài)。隨著數(shù)據(jù)中心走向業(yè)務(wù)核心,以土建為視角的傳統(tǒng)數(shù)據(jù)中心建設(shè)方式必須改變。
建設(shè)思想革新:計(jì)算機(jī)架構(gòu)代替土建工程
領(lǐng)先的ICT企業(yè)都在反思數(shù)據(jù)中心建設(shè)問題,探索數(shù)據(jù)中心建設(shè)新模式。騰訊和中興通訊研究國(guó)內(nèi)外經(jīng)驗(yàn),通過集裝箱、SOHOMO等模式的嘗試和摸索,不約而同地發(fā)起了數(shù)據(jù)中心產(chǎn)品化的進(jìn)程。中興通訊通過對(duì)數(shù)據(jù)中心進(jìn)行生命周期和KPI管理,發(fā)展出微模塊數(shù)據(jù)中心的產(chǎn)品形態(tài)——把末端結(jié)構(gòu)系統(tǒng)、制冷系統(tǒng)、配電系統(tǒng)、管控系統(tǒng)組合成為一個(gè)產(chǎn)品,并和土建、消防、水電、網(wǎng)絡(luò)形成標(biāo)準(zhǔn)接口。從計(jì)算機(jī)架構(gòu)的視角出發(fā),用產(chǎn)品研發(fā)的方法和流程,通過系統(tǒng)級(jí)的組合優(yōu)化和分拆拼裝方式去做數(shù)據(jù)中心產(chǎn)品。從此數(shù)據(jù)中心建設(shè)不再是機(jī)房裝修,而可以被整體視為計(jì)算機(jī)機(jī)框(機(jī)箱、電源、風(fēng)扇、CMM管理單板)的組裝。通過樣機(jī)試制和系統(tǒng)測(cè)試的方式,平衡性能和可靠性,壓縮前期工程設(shè)計(jì)的過多的冗余量;通過工廠預(yù)制和現(xiàn)場(chǎng)拼裝,平衡模塊化和靈活性,減少前期工程實(shí)施中在安裝和調(diào)試環(huán)節(jié)人工、材料的浪費(fèi),并增加對(duì)物理土建和服務(wù)器設(shè)備的適配靈活性。
2013年,在廣東聯(lián)通的支持下,在深圳坪山新區(qū),騰訊、中興通訊和廣東聯(lián)通共同打造了亞洲最大的微模塊數(shù)據(jù)中心,一起完成了數(shù)據(jù)中心的劃時(shí)代變革。在15000米2、12000kVA的容量下,歷時(shí)4個(gè)多月,建成可用性達(dá)到Tier3+、30%負(fù)載率PUE1.5左右,可容納85000多臺(tái)服務(wù)器和交換機(jī)單板的數(shù)據(jù)中心。
本質(zhì)為去工程化、節(jié)能、智能化
坪山數(shù)據(jù)中心完全由微模塊組成,一期建設(shè)20個(gè)微模塊,二期建設(shè)40多個(gè)微模塊。整個(gè)項(xiàng)目從裝修進(jìn)場(chǎng)到完工,僅花了4個(gè)多月的時(shí)間,其中二期40個(gè)微模塊從進(jìn)場(chǎng)安裝到通過測(cè)試驗(yàn)證只用了45天,充分體現(xiàn)了微模塊易復(fù)制、部署速度快的優(yōu)勢(shì)?焖俨渴鸬年P(guān)鍵在于去工程化的設(shè)計(jì),去工程化就是要壓縮物料數(shù)量、壓縮工序、優(yōu)化作業(yè)編排、嚴(yán)格工程指導(dǎo),通過這些標(biāo)準(zhǔn)化的工作,來提升效率。在系統(tǒng)測(cè)試過程中,中興通訊一位結(jié)構(gòu)工程經(jīng)理在對(duì)樣機(jī)的去工程化測(cè)試報(bào)告評(píng)審中提出多個(gè)優(yōu)化的設(shè)計(jì)。比如就底座調(diào)平這一工序,采取了優(yōu)化設(shè)計(jì)后,這一工序的工期就從10個(gè)模塊6天,壓縮到了10個(gè)模塊2天,并節(jié)省了大量螺栓等工程輔材。再比如對(duì)于管控子系統(tǒng)所用的物料型號(hào),必須在系統(tǒng)測(cè)試實(shí)驗(yàn)室通過兼容性測(cè)試,這樣工程調(diào)試就不需要研發(fā)人員投入,調(diào)試的人員投入和花費(fèi)時(shí)間也在大幅降低。
坪山數(shù)據(jù)中心項(xiàng)目集高壓直流、行級(jí)制冷、能效管理等于一體,機(jī)房微模塊分別標(biāo)準(zhǔn)化為18R模塊、12R模塊。18R模塊按照總體功率120kW,12R微模塊按照總體功率80kW計(jì)算。微模塊局部PUE1.07,30%負(fù)載率整體PUE1.5左右,90%負(fù)載率整體PUE1.4左右,創(chuàng)造了PUE在深圳地區(qū)的新低。項(xiàng)目聯(lián)合團(tuán)隊(duì)不僅重視高負(fù)載率下的PUE,也重視低負(fù)載率下的PUE,在樣機(jī)試制和系統(tǒng)測(cè)試中,優(yōu)化行間空調(diào)的群控策略,有效降低PUE,并形成了低負(fù)載率情況下如何節(jié)能等一些實(shí)用的運(yùn)維建議。
坪山數(shù)據(jù)中心項(xiàng)目非常重視智能化,每個(gè)模塊都有一套管控軟件iDCIM,通過集成平臺(tái),對(duì)每個(gè)模塊和各個(gè)狀態(tài)進(jìn)行統(tǒng)一展示,類似計(jì)算機(jī)的CMM管理單板。iDCIM數(shù)據(jù)中心監(jiān)控系統(tǒng)具備豐富的界面組態(tài)、多樣的報(bào)警功能、開放式協(xié)議接口、大容量的數(shù)據(jù)采集、存儲(chǔ)功能以及智能的數(shù)據(jù)分析技術(shù)。iDCIM的能效管理模塊對(duì)整個(gè)機(jī)架服務(wù)區(qū)用電量進(jìn)行管理和記錄,同時(shí)可以通過網(wǎng)絡(luò)進(jìn)行外部訪問,溫度、濕度、水浸和煙霧探測(cè)監(jiān)測(cè)都與告警系統(tǒng)整合在一起,便于集中管理和遠(yuǎn)程監(jiān)控。
只是數(shù)據(jù)中心產(chǎn)品化的啟程
據(jù)預(yù)計(jì)到2025年,數(shù)據(jù)中心將從項(xiàng)目集成工程變成制造業(yè),F(xiàn)acebook在最新的OCP(OpenComputingProject,開放計(jì)算項(xiàng)目)公布了最新的項(xiàng)目實(shí)踐RDDC(RapidDeployment Data Center,快速部署數(shù)據(jù)中心),其數(shù)據(jù)中心組件已經(jīng)開始全面的模塊化和產(chǎn)品化,除了微模塊外,供配電、制冷、土建都在和整柜服務(wù)器OpenRack一樣開始產(chǎn)品化。相信騰訊和中興通訊將持續(xù)投入、縱深發(fā)力,并在標(biāo)準(zhǔn)、項(xiàng)目、技術(shù)預(yù)研、產(chǎn)品研制上開展廣闊的合作,共同推進(jìn)數(shù)據(jù)中心產(chǎn)品化革新。