資料中心基礎設施有哪些:供電、製冷到網路七大系統一覽
資料中心基礎設施通常分為七大系統:供電、製冷、機櫃與佈線、消防、安防、環境監控和網路。前三類決定裝置能不能裝進去、能不能持續執行,消防與安防決定出事時損失多大,環境監控負責報警,網路系統則是機房對外提供服務的通道。
資料中心基礎設施有哪些?常見的分法是按功能分成七類:供電系統、製冷系統、機櫃與佈線系統、消防系統、安防系統、環境監控系統、網路系統。IT 裝置(伺服器、儲存、交換器)不算基礎設施,它們是被這七類系統“託著”的物件。下面這張表先給出全貌,後面逐一展開。
七大系統與關鍵裝置對照表
| 系統 | 解決的問題 | 關鍵裝置與部件 |
|---|---|---|
| 供電 | 電從哪來、斷電了怎麼辦 | 市電引入、變壓器、低壓配電櫃、UPS、電池組、柴油發電機、ATS、列頭櫃/母線槽、PDU |
| 製冷 | 裝置產生的熱怎麼帶走 | 精密空調、冷水機組、冷卻塔、水泵、列間空調、冷熱通道封閉、新風與加溼除溼 |
| 機櫃與佈線 | 裝置放哪、線怎麼走 | 19 英寸機櫃、走線架與橋架、光纖配線架(ODF)、銅纜配線架、防靜電地板 |
| 消防 | 起火了怎麼發現、怎麼滅 | 吸氣式極早期煙霧探測、感煙感溫探測器、氣體滅火系統、防火分割槽與防火門 |
| 安防 | 誰能進來、進來做了什麼 | 門禁、雙門互鎖通道、影片監控、周界報警、訪客登記、機櫃鎖 |
| 環境監控 | 哪裡出了問題,誰來報警 | 溫溼度感測器、漏水檢測繩、UPS 與空調通訊介面、智慧電錶、告警平台 |
| 網路 | 服務怎麼送出去 | 運營商光纜引入、傳輸裝置、核心/匯聚/接入交換器、路由器、防火牆與清洗裝置、帶外管理網 |
供電系統:從市電到伺服器電源
供電是所有系統裡冗餘要求最高的一類。一條完整的供電鏈路是:
- 市電引入:高等級機房要求兩路相互獨立的市電(通常來自不同的上級變電站),任一路故障另一路可以承擔全部負載;
- 變壓與低壓配電:10 kV 市電經變壓器降到 380 V 低壓,進入低壓配電櫃分配給 IT、製冷和照明等負荷;
- UPS 與電池:資料中心用的是線上式雙變換 UPS,市電經整流、逆變後輸出,供電品質與市電無關。電池只需要撐到發電機起來並穩定輸出,按分鐘級設計;
- 柴油發電機與 ATS:市電中斷後由自動轉換開關(ATS)切換到發電機,發電機油箱容量決定能連續跑多久;
- 列頭櫃或母線槽:把 UPS 輸出分配到每一列機櫃;
- PDU:機櫃內的電源分配單元,分基本型、計量型(能看電流)和可切換型(能遠端控制每個插口)。
冗餘級別用 N 表示滿足負載所需的數量:N 是剛好夠用,N+1 多一台備用,2N 是兩套完全獨立的系統。IT 裝置一般配雙電源,分別接到來自 A、B 兩路的 PDU。
一個粗略的容量算例:假設 100 個機櫃,單櫃設計功率 5 kW,IT 負載就是 500 kW;如果 PUE 按 1.5 估算,機房總功率約 750 kW。2N 配置意味著兩組 UPS 都要各自承擔 500 kW,發電機容量則要覆蓋總功率並留出餘量。規劃機櫃時先問“一個機櫃能給多少電”,比問“能放幾台伺服器”更實在。
製冷系統:把熱量搬出機房
伺服器消耗的電能幾乎全部變成了熱,1 kW 的 IT 負載就需要大約 1 kW 的製冷量來帶走。常見的製冷形式有:
- 風冷精密空調:室內機加室外冷凝器,結構簡單,適合中小機房;
- 冷凍水系統:冷水機組製冷,冷卻塔散熱,水泵把冷凍水送到機房內的空調末端,大型機房的主流方案;
- 列間空調:裝在機櫃列中間,就近製冷,適合高密度機櫃;
- 冷熱通道封閉:機櫃面對面擺放形成冷通道、背對背形成熱通道,再把其中一條封閉起來,避免冷熱氣流混合;
- 自然冷卻:室外溫度低時用室外空氣或板式換熱器直接帶走熱量,降低壓縮機執行時間。
溫度要求上,國內《資料中心設計規範》(GB 50174)和 ASHRAE 的推薦範圍都是冷通道或機櫃進風溫度 18–27 °C。很多機房把溫度設得很低並不能提高可靠性,只會推高電費。溼度要控制在不結露、不產生靜電的範圍內,具體指標以規範為準。
機櫃與佈線:裝置的“房子”和“血管”
機櫃按 19 英寸標準設計,1U 高 44.45 mm,常見 42U,寬 600 mm,深 1000 或 1200 mm;網路機櫃通常更寬(800 mm)以便理線。機櫃要按冷熱通道方向擺放,前門進風、後門出風,空 U 位裝盲板防止熱風迴流。
佈線分強電和弱電,兩者要分開走:
- 上走線:橋架和線槽架在機櫃頂部,擴容和檢修方便,新建機房多采用這種方式;
- 下走線:走在防靜電活動地板下,地板下同時也是送風通道,線纜多了會擋風。
弱電部分包括光纖配線架(ODF)、銅纜配線架、跳線和標籤。光纖按傳輸距離選多模(OM3、OM4)或單模(OS2),銅纜常用 6 類或 6A 類。佈線系統的核心不是線,而是標籤和台帳:每一根跳線兩端都有編號,每個連接埠在系統裡能查到接的是哪台裝置。
消防系統:先發現,再滅火
機房消防與普通建築不同:主機房裡都是帶電裝置,通常採用氣體滅火而不是普通水噴淋,常見滅火劑有七氟丙烷、IG-541 混合氣體和全氟己酮;哪些等級的機房允許用細水霧等其他方式,以 GB 50174 的規定為準。一次完整的聯動過程是:
- 吸氣式極早期煙霧探測器在肉眼看到煙之前報警;
- 兩路獨立的探測器(例如感煙與感溫)同時報警後才進入滅火程式,避免單個探測器誤報就噴放;
- 聯動關閉空調、新風和防火閥,避免滅火氣體被排走;
- 延時若干秒供人員撤離,然後噴放。
此外還有防火分割槽、防火門、耐火電纜等土建部分。機房投入使用後要定期檢查氣瓶壓力和探測器靈敏度,這是最容易被忽視的一項。
安防系統:管住人
安防系統的物件是人。機房通常分割槽管理:園區周界、樓棟、機房區、機櫃四層,每一層都有對應的門禁。核心區常設雙門互鎖通道,前一道門關閉後後一道門才能開啟。影片監控要覆蓋所有出入口和機櫃通道,託管客戶往往會要求檢視自己機櫃的錄影。機櫃本身也可以上鎖,或者使用電子機櫃鎖,把開櫃記錄接入門禁系統。
環境監控(動環):讓問題第一時間被看到
動力環境監控系統把上面各類裝置的狀態集中起來:
- 動力:市電電壓與電流、UPS 輸入輸出與電池狀態、配電櫃各回路電流、發電機狀態;
- 環境:機房各點溫溼度、漏水檢測、煙感、空調執行引數;
- 安防:門禁開關記錄、影片聯動。
它不管伺服器和客戶,只管“機房有沒有事”,出了事透過簡訊、電話或平台推送告警。它與 DCIM 的分工可以參考DCIM 與動環監控的區別。
網路系統:機房對外的通道
網路系統包括:
- 線路引入:運營商光纜從不同方向進入進線間,避免一處施工挖斷就全斷;
- 傳輸與出口:傳輸裝置、出口路由器,多線機房透過 BGP 與多家運營商互聯;
- 交換層:核心、匯聚、接入三層結構,或 Spine-Leaf 兩層結構,接入交換器直接連伺服器;
- 安全裝置:防火牆、旁路部署的流量清洗裝置;
- 帶外管理網:伺服器 BMC 管理口和交換器管理口接入獨立的管理網路,與業務網隔離。
機房等級:這些系統要做到什麼程度
同樣七大系統,不同等級的機房冗餘程度差別很大。國內和國際各有一套分級:
| 體系 | 等級 | 要求 |
|---|---|---|
| GB 50174《資料中心設計規範》 | A 級 | 容錯:在一次意外事故後,或單系統裝置維護、檢修時,業務仍能正常執行 |
| GB 50174 | B 級 | 冗餘:在冗餘能力範圍內,裝置故障不導致業務中斷 |
| GB 50174 | C 級 | 基本:基礎設施正常執行的情況下業務不中斷 |
| Uptime Institute | Tier I | 基本容量,沒有冗餘 |
| Uptime Institute | Tier II | 冗餘部件(N+1) |
| Uptime Institute | Tier III | 可並行維護,任一裝置檢修時業務不中斷 |
| Uptime Institute | Tier IV | 容錯,任一裝置故障時業務不中斷 |
兩套體系都按冗餘程度分級,思路相近,但定義和評定方法不同,不能直接換算,也不要把“A 級”與“Tier IV”簡單畫等號。選機房時問清楚具體是哪一套的哪個等級,以及是設計等級還是經過第三方認證的等級。
在管理系統裡怎麼落地
基礎設施建好之後,日常運營要回答的問題是:每個機房還剩多少電、多少 U 位、多少頻寬。Toplink DCIM 按資料中心、機櫃、U 位、裝置四層組織資源,每個機房記錄供電容量、頻寬和聯絡人,機櫃按實際高度劃分 U 位,機櫃內的智慧 PDU 可以統一納管,首頁按機房彙總用電量、進出頻寬和利用率。把機櫃與 PDU 的資料放進同一套台帳,擴容規劃就不必再去現場清點。
常見問題
資料中心基礎設施和 IT 裝置是一回事嗎?
不是。伺服器、儲存、交換器屬於 IT 裝置,是機房裡“幹活”的部分;基礎設施是讓這些裝置能通電、散熱、安全執行的配套系統。PUE 就是用總用電量除以 IT 裝置用電量得到的。
小機房也需要這七大系統嗎?
規模不同,形態不同。幾個機櫃的小機房也需要 UPS、空調、消防和門禁,只是可能用一台機房專用空調代替冷凍水系統、用氣體滅火櫃代替管網系統。缺哪一類,就要接受對應的風險。
冷通道封閉和熱通道封閉有什麼區別?
冷通道封閉把空調送出的冷風限制在機櫃前方的通道里,機房其餘空間處於熱環境;熱通道封閉把機櫃排出的熱風封在通道里直接回到空調,機房其餘空間是冷環境,人員工作更舒適。兩種做法目的相同,都是防止冷熱氣流混合,選哪種要看空調的送回風方式和建築條件。