更新時間:2023年11月22日 6489瀏覽
在網絡正常的情況下,從北京的清華大學傳輸4T大小的數據到江蘇的國家超級計算無錫中心太湖之光超級計算機需要5天。但若我們把數據都刻成盤,然后用快遞寄過去,第2天下午就到無錫了~\
這一情況顯示,在算力建設過程中,想要更加高效的使用算力,數據中心的互聯互通(即運力)必不可少,沒有運力的支撐,算力難以發揮其自身作用。此外,我國數據量正快速增長,據預測,到2025年,我國產生的數據量預計將達48.6ZB,成為全球第一,對存儲性能的要求正逐步提高,發展存力也成為焦點問題。
以此來看,算力建設并非簡單的提升規模,而是算力、運力、存力協同發展。高運力具備高網絡數據吞吐能力,是算力和存力充分釋放的關鍵。如果網絡丟包、流量不均,那么數據傳輸效率便會降低,增加計算和存儲等待,算力性能也將隨之降低;高存力則可通過全局元數據、算子下推、向量檢索、緩存加速等數據加速引擎,可縮短數據預處理周期、提高訓練集加載效率和推理準確度、減少訓練中斷,有效提升GPU/NPU利用率。
影響數據中心建設、運維
數據中心主要是進行數據存儲、計算、處理等,算力、存力、運力的多少是數據中心規劃、建設時必須考量的因素。華為數據存儲產品線副總裁龐鑫表示,目前算力相關的政策和建設是比較充分和充裕的,但存力的發展還不均衡。運力同樣如此,存力、運力的發展將改變目前的布局,對數據中心建設、運維產生重要影響。
一方面,存力、運力比重的提升,必然會導致數據中心規劃設計的革新,改變整體建設格局,IT設備的部署、制冷的應用、光纜等網絡設施的鋪設等也將受到影響;一方面,數據中心布局的變化將對運維產生重大影響。數據中心的基本要求是安全穩定,為保證這一點,運維需要根據革新進行相對應的調整。
因此,為推動算力、存力、運力的均衡發展,需要數據中心在設計、建設、運維等多方面進行優化升級,需要多方面協同推動,其中,標準擔任著先行角色。
為促進產業更好的發展,以“行標”或“團標”的方式,發布“算力中心建設指南”,提出“算力”“存力”“運力”的適當比率范圍;提出“存力”中采用SSD先進存力的適當比率范圍,提出“運力”應該具備的參數指標等要求,避免大力發展算力中心建設中的某些傾向,均衡部署,均衡發展。
目前,相關標準也已經在逐步推出。如國內首個《存儲容量計量白皮書》的編撰,其圍繞數據存儲需求,剖析目前數據存儲技術,圍繞應用場景數據特點構建真實數據模型,通過先進計量引導行業技術創新,支撐存儲行業穩步發展,提高上下游產業標準協同性和配套性,推動建立覆蓋全產業鏈和產品全生命周期的標準群。
影響數據中心產業鏈上游格局
數據中心具備產業鏈條長、投資規模大、帶動效應強的特征,算力、存力、運力的協同發展是下游產業發展的需要,其變化將影響整個產業鏈的發展情況,尤其是各類基礎設備所在的上游,有望進入新的發展時期。這表現為兩個方面,一是對網絡設備、存儲設備等提出新需求,二是數據中心采購比的變化將產生新的商業機遇。
設備層面,以網絡設備為例,運力的發展需要傳輸網絡不僅要滿足低時延、高可靠、大帶寬、廣覆蓋等要求,還能解決跨區域、跨層級連接的挑戰;同時,需要數據中心網絡的對等互聯,發展出全新一代統一互聯協議,消除數據通信協議轉換代價,實現對等高速互聯,跨數據中心也需要具備無損網絡的能力。
存儲設備上同樣如此,如當前備受關注的大模型訓練,其龐大的數據量對性能指標有更高的要求,數據顯示,AI服務器所需的DRAM/NAND分別是常規服務器的8/3倍。這將會催生高性能存儲的新品類,也會加速存儲在各環節的融合,類似于數據湖存儲,而不是像過去預處理、訓練、推理、歸集各自構建。
商業發展層面,運力、存力的發展將改變數據中心采購比,僅以存儲來看,數據量的大規模增長,便會推動存儲設備在數據中心采購物料清單中占比的提升。對于相關設備廠商來說,這意味著新的商業機遇,同時,數據中心對于設備的新要求也將推動產品的革新發展,將加快數據中心產業鏈上游的發展,其中更加符合數據中心需求的廠商有望從中脫穎而出,在業務方面獲得突破。
算力建設的重要目的是推動算力供給的提升,提高算力使用的效率,需要算力、運力、存力的協同發展,數據中心的建設、運維及產業鏈都將因此有所變革,這其中涉及設備的優化、技術的發展及標準的制定等。依此趨勢,數據中心將迎來新的發展,算力、運力、存力也將獲得更進一步的發展。
文章來源:中國IDC圈