東數(shù)西算不止于“算”,更需“新存儲”

在“東數(shù)西算”場景下,任何一家云存儲供應商在算力網(wǎng)絡中都必須面對存儲系統(tǒng)的挑戰(zhàn),即要解決存儲系統(tǒng)高性能、高擴展、易使用的問題。

本文來自科技云報道。

作為數(shù)字時代的一次大變革,“東數(shù)西算”已然成為了一個“家喻戶曉”的議題。

QQ截圖20211119092508.png

目前,我國數(shù)據(jù)量占全球18%,算力供需失衡問題亟待解決。

正因如此,國家通過“東數(shù)西算”工程,布局建設“新型算力網(wǎng)絡體系”,推動算力集約化發(fā)展。

不少人將“東數(shù)西算”比肩“南水北調(diào)”、“西氣東輸”等關乎民生質(zhì)量的浩瀚工程。

然而,在“東數(shù)西算”的宏大場景下,仍面臨諸多現(xiàn)實挑戰(zhàn)。

“東數(shù)西算”工程的部署,將推動東數(shù)西存(熱點區(qū)域數(shù)據(jù)計算、西部備份存儲)、東數(shù)西訓(東部算法倉庫、西部離線大數(shù)據(jù)分析);東視西渲(滿足圖像渲染、視頻渲染等后臺制作場景);將實時性要求不高的業(yè)務如文檔云、掌上保險、開發(fā)測試等應用部署在西部節(jié)點,促進數(shù)據(jù)中心集約化、集群化發(fā)展。

從存儲系統(tǒng)的角度看,這些細分場景帶來了全新的挑戰(zhàn),例如:

本地/近場下的熱點數(shù)據(jù)如何高性能存???海量數(shù)據(jù)如何靈活遷移?存儲系統(tǒng)層操作細節(jié)如何無感化,向客戶呈現(xiàn)便捷業(yè)務應用?數(shù)據(jù)存儲的安全如何保障?如何在滿足“算網(wǎng)共生、智能編排”的架構要求基礎上,有效降低存儲成本和能耗?

算力網(wǎng)絡挑戰(zhàn)下

移動云“新存儲”應時而生

在“東數(shù)西算”場景下,任何一家云存儲供應商在算力網(wǎng)絡中都必須面對存儲系統(tǒng)的挑戰(zhàn),即要解決存儲系統(tǒng)高性能、高擴展、易使用的問題。

移動云作為中國移動落實國家“東數(shù)西算”政策的重要一環(huán),應時而生走出了一條“新存儲”技術路線。

立足運營商云“網(wǎng)絡+安全”的特色優(yōu)勢,移動云以云網(wǎng)融合為基礎,構建云邊端算力協(xié)同、算網(wǎng)融合、智能編排的社會級算力服務平臺,包括“基于自研架構,打造立體泛在的算力分布,統(tǒng)一異構封裝,拉動跨域協(xié)同,構筑更高效、更彈性、更可信算力基礎設施”,構建出算力網(wǎng)絡下的新存儲能力。

基于此,移動云存儲系統(tǒng)能夠“扛得住、存得下、用得好”:滿足企業(yè)關鍵業(yè)務云化對存儲的性能要求,提供高帶寬、高IOPS、低時延保障;滿足高速增長的數(shù)據(jù)存儲需求,提供易擴展、高吞吐、海量文件高效索引保障;屏蔽復雜的存儲系統(tǒng)層次操作細節(jié),提供易部署、易操作、簡潔易用的產(chǎn)品形態(tài)。

QQ截圖20211119092508.png

移動云自研存儲引擎

全系存儲產(chǎn)品賦能多業(yè)務場景

“東數(shù)西算”工程凸顯了數(shù)據(jù)作為一種生產(chǎn)要素的價值,并將其分類治理——對于服務后臺加工、存儲災備、離線分析、存儲備份等對網(wǎng)絡時延要求不高的“冷數(shù)據(jù)”,優(yōu)先向貴州、內(nèi)蒙古、甘肅、寧夏節(jié)點轉(zhuǎn)移;與此同時,對網(wǎng)絡時延要求高的“熱數(shù)據(jù)”,選擇在東部城市進行布置。

為了全面適配“東數(shù)西算”多種應用需求,移動云基于自研“大云天權統(tǒng)一存儲引擎”的超高IO性能及跨域糾刪能力,推進分布式塊存儲、對象存儲、文件存儲等存儲全系產(chǎn)品升級,深度覆蓋多種應用場景。

塊存儲產(chǎn)品:基于天權存儲引擎,打造百萬IOPS、百微秒時延、4GB/s吞吐的新一代云硬盤產(chǎn)品,可有效支撐大型數(shù)據(jù)庫、實時日志分析等IO密集型以及AI訓練、基因測序等高吞吐型業(yè)務場景,滿足現(xiàn)場及近場計算訴求。

對象存儲產(chǎn)品:通過存儲多協(xié)議協(xié)同(Storage Mesh),實現(xiàn)“存算一體,數(shù)隨算走”,打破“存儲墻”,連通“數(shù)據(jù)孤島”,打造“數(shù)據(jù)隨心可取”的存儲服務體系。

文件存儲產(chǎn)品:在基于對象存儲的跨域糾刪能力基礎上,自研移動云文件存儲(CFN版本),基于EOS跨域糾刪(數(shù)據(jù))及跨域KV數(shù)據(jù)庫(元數(shù)據(jù))有效支撐實時流媒體文件編輯等跨地域數(shù)據(jù)共享場景,實現(xiàn)多點接入、簡單配置、隨心訪問。

QQ截圖20211119092508.png

總體而言,在產(chǎn)品體系賦能方面,移動云能夠?qū)崿F(xiàn)數(shù)據(jù)跨域共享、就近訪問,支持數(shù)據(jù)冷熱智能分層、按需流動,具備多級容災能力,滿足亞毫秒級訪問時延,向客戶提供高性能、高擴展、高并發(fā)的數(shù)據(jù)存儲服務。

作為底層基礎設施能力之一,移動云云存儲產(chǎn)品的部署目前已覆蓋移動云所有資源池。其中,“天權”存儲系列產(chǎn)品部署規(guī)模超3萬臺服務器,容量規(guī)模超2500 PB,服務80余萬家客戶。

且大云天權統(tǒng)一存儲引擎技術自主可控,適配國產(chǎn)化服務器,實現(xiàn)“一云多芯”,真正做到安全又高效。

響應“雙碳”政策

移動云存儲實現(xiàn)“節(jié)能減排”

算力服務過程中,海量數(shù)據(jù)處理帶來的“能耗和碳排放”問題也備受關注。就此,移動云響應國家“雙碳”政策,在打造新一代算網(wǎng)存儲能力時已考慮相關對策。

例如,通過上文提到的“存儲多協(xié)議協(xié)同”實現(xiàn)“存算一體,數(shù)隨算走”,構建“數(shù)據(jù)隨心可取”的綠色節(jié)能數(shù)據(jù)中心,以及在技術上根據(jù)對象存儲多規(guī)格以及多規(guī)格間的智能數(shù)據(jù)分層特性,讓冷數(shù)據(jù)逐步流動到存儲成本更低、能耗開銷更低的存儲類型中,達到節(jié)能減排。

具體到產(chǎn)品表現(xiàn),移動云第四代對象存儲實現(xiàn)跨域糾刪,使數(shù)據(jù)冗余機制可以從3副本的300%冗余降至6+6糾刪碼形式的200%冗余,投資成本降低33%。

未來,在算網(wǎng)融合優(yōu)勢加持下,移動云將不斷創(chuàng)新存儲技術、優(yōu)化全線存儲產(chǎn)品,兼顧安全高效與綠色低碳,為“促進東西部平衡發(fā)展、提升產(chǎn)業(yè)鏈抗風險能力、賦能行業(yè)脫碳增長”貢獻力量。

THEEND

最新評論(評論僅代表用戶觀點)

更多
暫無評論