1.背景

2013年以后,國家逐步出臺政策,引導大型、超大型數據中心逐漸向中西部以及熱點地區周邊轉移。2020年,數據中心和5G一起被列入新基建,意味著數據中心和網絡的協同發展被提到了更高的位置,數網協同將成為數據中心發展的下一站。

據工信部最新發布的《數據中心發展指引(2019)》,到2018年底,北京、上海、廣東三地的在用機架數約占全國的三分之一;中西部地區數據中心在用機架數全國占比約為40%。在上架率方面,國內數據中心總體平均上架率為50%左右。東部沿海省市的上架率基本達到60%以上,而西部各省的上架率僅在30%左右,東西部差距仍然較大。有一半的數據中心為直接接入骨干網,三分之一的數據中心接入城域網。從機架分布和上架率情況來看,在現有的網絡條件下,數網協同還無法支撐全國數據中心的布局優化,亟待破局。

圖表 1數據中心網絡接入情況

2.數據中心網絡

2.1.數據中心內部網絡

不同類型的應用對數據中心網絡有著不同的要求。前端網絡通常采用TCP協議,IP/以太網絡技術成為前端網絡主流技術,成本低、擴展性好;存儲網絡一直在追求大帶寬高吞吐以充分發揮存儲盤和CPU的效率,上世紀90年代末采用同時期比Ethernet速率更高的FC技術。進入20世紀,隨著更高速率的SSD的規模應用,特別是近來高速低時延的NVMe技術的出現,存儲需要更高速更高效的網絡;計算網絡主要采用InfiniBand專網,典型代表為HPC等高性能業務,低時延是其極致追求。但隨著RoCE技術的深入發展,Ethernet在計算網絡中的應用也逐漸普遍。

圖表 2數據中心三網合一

鑒于以太網是生態最完整、應用最廣泛的網絡技術路線,為了降低數據中心網絡的總擁有成本(TCO,Total Cost of Ownership),前端網絡、存儲網絡和計算網絡三張網絡的技術歸一到以太是不可避免的,這就是開放數據中心委員會ODCC開展的研究項目“數據中心三網合一”。如圖2所示,利用三網合一技術,可以大幅降低數據中心網絡的TCO,并顯著降低組網和運維工作的復雜性。

2.2.DCI

云計算在發展過程中,無論是云服務商的自身業務,還是客戶的應用需求,均需要高效、可靠的專用網絡進行支撐。DCI增強云服務商內部的數據中心間互聯,數網協同通過專用網絡連接云或數據中心。

當前,包括Google、阿里等業界領先的云服務商均在進行DCI網絡的建設。Google已經建成B4網絡,用以連接其分布于全球不同地區的數據中心。根據公開資料,B4網絡采用軟件定義網絡進行實現,建設水平相對較高,且在流量調度等方面已經發揮重要作用。

近年來,在強大的網絡能力的支撐下云計算發展迅速。隨著共有云和私有云的不斷發展,網絡基礎設施需要通過優化網絡結構確保網絡的靈活性、智能性和可運維性,提供差異化的網絡服務,更好的適應云計算應用的需求。數網協同是云計算和網絡發展到一定階段的必然結果,也將成為未來一段時期的重點發展方向。

3.發展建議

充分考慮資源環境條件因素,合理進行數據中心布局,夯實數網協同發展的基礎。數據中心作為新基建的一部分,更多的是要承擔各類包括云計算、大數據、人工智能等上層應用的基礎設施的作用,更好的適應上層應用的發展需求。

通過推動區域數據中心直聯促進區域數字經濟發展。隨著5G的部署應用加速,傳統的東西向流量將會演變為南北向流量的爆發式增長。因此,將傳統的以行政區劃組網轉變為以IDC為核心組網,并結合IDC流量流向進一步優化網絡結構形成數網協同發展將成為大勢所趨。

通過網絡擴容和數據中心專線建設,推動三大經濟區域數據流動,提高整體的信息化活力。京津冀、長三角、大灣區為我國三個經濟發展最發達的地區,三個地區存在著密集的經濟和人才交互,2019年京滬高鐵全年全線運送旅客達到2.15億人次。擴大三個區域之間的網絡帶寬、降低時延將對三個區域之間更多的應用交互起到積極的促進作用。

通過定向網絡直聯提高能源富足地區的網絡質量,將能源由電力輸出轉變為通過網絡輸出。不管是西氣東輸,還是南水北調,進行的都是全國性的資源調配。對于數據中心資源也是如此。我國內蒙、甘肅、寧夏、青海等地區能源豐富,年均氣溫較低,非常適合數據中心建設。實現能源富足地區到一線城市的網絡擴容和時延降低,對于我國整體資源的調配將起到間接的推動作用,通過將算力在光纖上進行輸出也將大大降低國家整體的資源轉移成本。

需要加快本地互聯網骨干直聯點建設,推動提升多個運營商之間的互訪網絡質量。直聯點的建設減少了全國流量傳遞過程中的繞轉,提高了區域內流量互通效率和安全性。隨著數網協同的深入發展,有必要繼續推動互聯網骨干直聯點的建設,使運營商之間的流量互訪更為暢通。

基于5G實現更廣泛的網絡接入。5G的部署會給用戶帶來高帶寬、低時延的業務體驗。邊緣計算將是5G的重要使用場景,一方面,可以滿足更多場景下網絡接入等用戶方需求;另一方面,邊緣接入將給數據中心帶來更大的數據流量,需要通過邊緣數據中心等設施進行提前處理。數網協同的趨勢下,5G和數據中心將會緊密協同,共同發展。

4.總結

推動區域網絡直聯、專用數據中心網絡通道建設、定向網絡直聯和本地網絡直聯點等方面的建設,使以數據中心為中心的網絡質量大幅提升,數網協同將能更好的適應并支撐上層應用的發展。

一直以來,信通院云大所積極參與開放數據中心委員會ODCC網絡方面的相關工作,持續進行關于數據中心網絡的研究,構建開放的網絡生態圈。同時,信通院云大所也在IEEE進行智能無損網絡項目的研究,將國內的研究成果推向國際。做好數網協同,將對有效支撐上層應用的開展提供基礎設施保障。數網協同必將成為數據中心發展的下一個目標。

郭亮,高級工程師,中國信通院云大所副總工程師,工業互聯網產業聯盟(AII)工業數據中心特設組聯執主席,開放數據中心委員會(ODCC)新測組組長,IEEE802.1 NENDICA智能無損網絡項目Editor。長期從事數據中心技術研究、政策支撐和標準化工作,負責和參與出版《數據中心熱點技術剖析》等專業著作四本,發表專業論文十多篇,牽頭制定相關技術規范幾十項。

何寶宏,博士,正高級工程師,中國信息通信研究院云計算與大數據研究所所長。中國通信標準化協會互聯網與應用工作委員會(TC1)主席,開放數據中心委員會(ODCC)名譽主席。從事互聯網相關的技術、標準、監管和戰略等研究20余年,具有業內豐富經驗,擁有《互聯網的基因》、《風向》兩部專著。