新數(shù)據(jù)時(shí)代元年,海量、多元、實(shí)時(shí)、多云的新數(shù)據(jù)特征

通過對金融、交通、電信、能源、醫(yī)療等行業(yè)的研究,報(bào)告指出新數(shù)據(jù)時(shí)代下表現(xiàn)出的新數(shù)據(jù)特征:數(shù)據(jù)海量增長,到2025年全球新創(chuàng)建的數(shù)據(jù)將達(dá)到175ZB;企業(yè)對實(shí)時(shí)數(shù)據(jù)需求增加,到2023年實(shí)時(shí)數(shù)據(jù)占全球數(shù)據(jù)圈24.5%的份額;未來全球?qū)⒂谐^70%的企業(yè)選擇多云部署模式,到2023年42.4%的企業(yè)將采用邊緣+核心的組合架構(gòu),核心數(shù)據(jù)中心的數(shù)據(jù)存儲(chǔ)容量占比將超過50%。

首先,海量、多元和非結(jié)構(gòu)化成新數(shù)據(jù)時(shí)代常態(tài)。報(bào)告顯示,2019年,全球存儲(chǔ)新裝機(jī)容量從EB級(jí)達(dá)到ZB級(jí),2025年全球新創(chuàng)建的數(shù)據(jù)將達(dá)到175ZB。數(shù)據(jù)環(huán)境多樣、復(fù)雜,數(shù)據(jù)從單一內(nèi)部小數(shù)據(jù)形態(tài)向多元?jiǎng)討B(tài)大數(shù)據(jù)發(fā)展,大量文本、圖片、視頻等非結(jié)構(gòu)化數(shù)據(jù)被產(chǎn)生和存儲(chǔ)。例如,在智慧城市場景中,中國的攝像頭保有量已經(jīng)達(dá)到億級(jí),加之交通系統(tǒng)往往會(huì)存儲(chǔ)相當(dāng)長時(shí)期內(nèi)的歷史數(shù)據(jù)用于查證和回溯,由此產(chǎn)生的海量新數(shù)據(jù)給存儲(chǔ)系統(tǒng)帶來壓力。

其次,數(shù)據(jù)的實(shí)時(shí)性需求變得更迫切。隨著互聯(lián)網(wǎng)、物聯(lián)網(wǎng)以及人工智能等技術(shù)在各行業(yè)的不斷滲透,企業(yè)對于數(shù)據(jù)實(shí)時(shí)性的需求日益增加。報(bào)告顯示,到2023年,實(shí)時(shí)數(shù)據(jù)將占全球數(shù)據(jù)圈24.5%的份額。金融的風(fēng)險(xiǎn)評估、交通的自動(dòng)駕駛、運(yùn)營商的智能網(wǎng)絡(luò)等許多場景,都需要依賴快速實(shí)時(shí)的數(shù)據(jù)采集、存儲(chǔ)和分析得以實(shí)現(xiàn)。

再次,基礎(chǔ)架構(gòu)向云-邊-端演進(jìn),重要的數(shù)據(jù)存儲(chǔ)位置依然在核心。未來兩年,全球?qū)⒂谐^70%的企業(yè)選擇多云部署模式。2023年,將有42.4%的企業(yè)采用邊緣+核心的組合架構(gòu)建立和運(yùn)行數(shù)據(jù)庫,設(shè)備架構(gòu)從云+端的兩級(jí)架構(gòu)向云-邊-端三級(jí)架構(gòu)演進(jìn)迭代。雖然數(shù)據(jù)的產(chǎn)生更多來自端側(cè)和邊緣,但重要的數(shù)據(jù)存儲(chǔ)位置依然在核心,到2023年核心數(shù)據(jù)中心的數(shù)據(jù)存儲(chǔ)容量占比將超過50%。由于現(xiàn)代數(shù)據(jù)中心的復(fù)雜性,數(shù)百個(gè)應(yīng)用程序在數(shù)百臺(tái)服務(wù)器上運(yùn)行,同時(shí)還要運(yùn)行數(shù)十種監(jiān)測和管理工具,管理一直是云部署和云管理的重中之重。

存儲(chǔ):分布式存儲(chǔ)是新趨勢,閃存陣列是企業(yè)存儲(chǔ)加速首選

新數(shù)據(jù)時(shí)代數(shù)據(jù)呈現(xiàn)出海量、多元、實(shí)時(shí)、多云的特征。對于數(shù)字化轉(zhuǎn)型中的企業(yè)來說,在數(shù)據(jù)存儲(chǔ)的極致容量、極速性能、極簡架構(gòu)、極易管理等方面提出要求。報(bào)告建議投資閃存陣列以提升存儲(chǔ)性能,以滿足實(shí)時(shí)數(shù)據(jù)處理對百萬級(jí)IOPS、亞毫秒級(jí)時(shí)延的需求;利用分布式存儲(chǔ)架構(gòu)在性能和容量擴(kuò)展方面的優(yōu)勢,解決大規(guī)模、高并發(fā)場景下對存儲(chǔ)的挑戰(zhàn)。

閃存陣列憑借其性能和穩(wěn)定性,成為企業(yè)存儲(chǔ)加速的首選方案。目前,閃存陣列已經(jīng)逐漸普及,新端口的固態(tài)硬盤、NVMe網(wǎng)絡(luò)架構(gòu),使存儲(chǔ)系統(tǒng)的性能有了大幅提升。未來,隨著新技術(shù)帶來的存儲(chǔ)效率大幅提升,將有越來越多的企業(yè)選擇閃存陣列來滿足數(shù)據(jù)實(shí)時(shí)性應(yīng)用需求。以山東高速ETC繳費(fèi)系統(tǒng)為例,在其數(shù)千公里的高速公路上分布著多個(gè)路段信息分中心、收費(fèi)站、收費(fèi)車道、ETC客服網(wǎng)點(diǎn),基于浪潮全閃存儲(chǔ)系統(tǒng)實(shí)現(xiàn)0.1毫秒通行ETC,日均清分業(yè)務(wù)處理量達(dá)到百萬筆。

高效、易于擴(kuò)展的分布式平臺(tái)引領(lǐng)存儲(chǔ)架構(gòu)新趨勢。分布式存儲(chǔ)系統(tǒng)采用可擴(kuò)展的架構(gòu),不僅能提高存儲(chǔ)的效率和數(shù)據(jù)的安全性,還可以進(jìn)行性能和容量的橫向擴(kuò)展,解決大規(guī)模、高并發(fā)場景下的存儲(chǔ)訪問問題。隨著5G、物聯(lián)網(wǎng)和人工智能的快速發(fā)展,企業(yè)對于分布式系統(tǒng)的需求將持續(xù)增加,分布式存儲(chǔ)成為多云環(huán)境的首選平臺(tái)。到2023年,40%的存儲(chǔ)系統(tǒng)將是分布式存儲(chǔ)架構(gòu)。以成都三環(huán)路為例,浪潮分布式存儲(chǔ)支撐了其超過6000路道路端口的視頻流,每天1億文件寫入和10億次查詢,智能交通管理效率提升500%。

多云環(huán)境下,提升存儲(chǔ)的可用性和管理能力。面對數(shù)據(jù)爆炸,存儲(chǔ)必須隨需應(yīng)變,軟件定義、智能化、多云間數(shù)據(jù)流動(dòng)是存儲(chǔ)未來的主流發(fā)展方向。比如浪潮以創(chuàng)新架構(gòu)構(gòu)建分布式存儲(chǔ),在一套系統(tǒng)內(nèi)提供文件、塊、對象、大數(shù)據(jù)等多種存儲(chǔ)服務(wù),支持Manila、Cinder、Nova、Swift接口對接,并通過智能運(yùn)維軟件管理多種設(shè)備,簡化多云設(shè)備管理。在中國廣電國網(wǎng)云平臺(tái)中,浪潮存儲(chǔ)平臺(tái)打通底層分布式存儲(chǔ)、虛擬化、OpenStack、云管平臺(tái),外部實(shí)現(xiàn)與網(wǎng)絡(luò)SDN、云安全等平臺(tái)對接,實(shí)現(xiàn)廣電國網(wǎng)的三地互聯(lián)互通和大規(guī)模業(yè)務(wù)支撐目標(biāo)。

告別人工干預(yù),存儲(chǔ)將進(jìn)入智慧運(yùn)維時(shí)代。人工智能技術(shù)無處不在,將快速融入存儲(chǔ)系統(tǒng)的發(fā)展,并在存儲(chǔ)容量、性能、硬盤故障預(yù)測方面起到關(guān)鍵作用。在清華大學(xué)“中國腦計(jì)劃”項(xiàng)目中,浪潮基于智能統(tǒng)一存儲(chǔ)管理平臺(tái)InView,對存儲(chǔ)系統(tǒng)進(jìn)行集中管理、智能監(jiān)測和故障預(yù)測報(bào)警,保障每秒51億像素、72小時(shí)連續(xù)寫入不丟幀的腦科研項(xiàng)目順利進(jìn)行。

報(bào)告還針對新數(shù)據(jù)時(shí)代的存儲(chǔ)未來發(fā)展提出了具體建議,基于云-邊-端多元部署的趨勢發(fā)展,企業(yè)需要制定從端到邊再到核心的完整數(shù)據(jù)管理解決方案。針對多云環(huán)境的必然趨勢,企業(yè)必須提升多云環(huán)境下的數(shù)據(jù)管理能力,同時(shí)持續(xù)關(guān)注NVMe、內(nèi)存SCM等技術(shù)更新及AI技術(shù)應(yīng)用。

報(bào)告原文,PC端下載可點(diǎn)擊地址1,移動(dòng)端下載可點(diǎn)擊地址2,或掃描下方二維碼:

分享到

zhangnn

相關(guān)推薦