作為全國一年一度信息存儲領(lǐng)域的盛會,本次大會吸引了存儲業(yè)界眾多知名專家、學(xué)者和企業(yè)的參與,通過專題演講、學(xué)術(shù)交流,產(chǎn)業(yè)前沿論壇、青年學(xué)者論壇和博士生論壇,進(jìn)行了發(fā)展我國信息存儲技術(shù)的深度研討,并開展大數(shù)據(jù)、云時代和軟件定義存儲等方面的新技術(shù)及新產(chǎn)品展示,集中呈現(xiàn)國內(nèi)外信息存儲領(lǐng)域的最新動態(tài)。
會上,深信服創(chuàng)新研究院存儲技術(shù)專家付忞帶來了《面向企業(yè)云的分布式存儲架構(gòu)》主題分享。秉承深信服多年存儲研發(fā)積累、具備豐富實踐經(jīng)驗的深信服企業(yè)級分布式存儲EDS以其高可靠、高性能兩大突出特性在本次大會備受關(guān)注。
▲深信服創(chuàng)新研究院存儲技術(shù)專家付忞
付忞表示,深信服從2014年開始投入存儲技術(shù)的研發(fā),并在自身超融合與桌面云用戶中積累了非常豐富和成功的塊存儲經(jīng)驗。目前深信服有超過5,000家的超融合案例,其中70%以上用戶的核心生產(chǎn)業(yè)務(wù)系統(tǒng)(如Oracle數(shù)據(jù)庫、SQL數(shù)據(jù)庫、ERP、MES系統(tǒng))承載在深信服分布式存儲之上。與此同時深信服桌面云已經(jīng)累計銷售75萬個并發(fā)授權(quán),而其中超過80%也都運(yùn)行在深信服的分布式存儲之上。
深信服企業(yè)級分布式存儲EDS則繼承了深信服過去多年的存儲技術(shù)積累,并在塊存儲的基礎(chǔ)上,融合了文件與對象存儲,構(gòu)建了基于“軟件定義”的統(tǒng)一存儲平臺。經(jīng)過不斷的技術(shù)創(chuàng)新與平臺優(yōu)化,深信服EDS在高可靠、高性能上面優(yōu)勢突出。
高可靠:數(shù)據(jù)冗余保護(hù)機(jī)制+多重主動防御能力
深信服EDS的高可靠性重點體現(xiàn)在:一是深信服EDS針對存儲冗余策略進(jìn)行了深度定制和優(yōu)化,支持副本和分布式糾刪碼,相比傳統(tǒng)存儲采用RAID方式的容錯性更強(qiáng),可實現(xiàn)故障自動切換,有效提升了存儲集群的可靠性與可用性,使得底層存儲更加穩(wěn)定。
二是深信服EDS推崇熱備空間概念,將傳統(tǒng)熱備盤的數(shù)據(jù)修復(fù)方式創(chuàng)新為熱備空間修復(fù)方式,通過將故障磁盤內(nèi)的數(shù)據(jù)打散,分散到集群所有可用磁盤空間進(jìn)行修復(fù),采用多磁盤并發(fā)的方式,從而快速提升數(shù)據(jù)修復(fù)效率,達(dá)到1T/30min的修復(fù)速率,降低故障修復(fù)時間,保障整個存儲平臺的高可靠。
三是深信服EDS能做到智能運(yùn)維,自動感知業(yè)務(wù)故障。經(jīng)過長時間和大量的錯誤代碼訓(xùn)練,深信服EDS AI智能檢測準(zhǔn)確率高達(dá)98.5%,可以實現(xiàn)在故障發(fā)生之前就能預(yù)判軟硬件的風(fēng)險點,及時預(yù)警并提出修復(fù)意見。相比傳統(tǒng)存儲,這種基于AI機(jī)器學(xué)習(xí)的主動防御能力大大保障了平臺高可靠性,避免突發(fā)故障所帶來的業(yè)務(wù)中斷風(fēng)險。
付忞表示,人工智能已經(jīng)基本融入到深信服所有的產(chǎn)品當(dāng)中。深信服EDS的AI智能化涵蓋了數(shù)據(jù)的全生命周期管理,包括性能及容量規(guī)劃、故障監(jiān)控、故障自愈、數(shù)據(jù)可視、一鍵管理等,并具備數(shù)據(jù)智能分類分層處理能力,讓平臺能夠智能感知數(shù)據(jù)的冷熱狀態(tài),還通過收集各種配置信息、使用日志來分析平臺運(yùn)行情況,為用戶提供存儲管理和使用建議等等。
高性能:分布式、智能合并等機(jī)制提高IOPS和吞吐
深信服EDS通過分布式數(shù)據(jù)庫、分布式緩存、IO路徑優(yōu)化等來保障平臺的高性能。
開源的分布式存儲自帶的數(shù)據(jù)庫在處理海量元數(shù)據(jù)時會出現(xiàn)性能的衰減,從而造成存儲集群在處理非結(jié)構(gòu)化數(shù)據(jù)時效率低下。深信服創(chuàng)新推出了分布式數(shù)據(jù)庫PhxKV,具備優(yōu)秀的性能擴(kuò)展能力,因而存儲集群在處理海量小文件時具備更好的性能穩(wěn)定性,性能抖動不超過5%,為EDS在高效處理百億級海量小文件的場景下發(fā)揮了重要作用。
深信服智能分布式緩存,可實現(xiàn)對數(shù)據(jù)的智能感知,通過區(qū)分?jǐn)?shù)據(jù)類型及大小特性來對不同數(shù)據(jù)做區(qū)分處理。相較于傳統(tǒng)存儲的機(jī)械式數(shù)據(jù)處理方式,深信服EDS可實現(xiàn)小IO的數(shù)據(jù)緩存合并,然后進(jìn)行數(shù)據(jù)落盤,大IO數(shù)據(jù)直接寫入機(jī)械盤,大幅提升每塊普通硬盤的隨機(jī)讀寫速度,從而發(fā)揮存儲集群的最大性能優(yōu)勢,三節(jié)點存儲集群可達(dá)到40W IOPS。
付忞表示,除了分布式數(shù)據(jù)庫與分布式緩存,深信服EDS還通過IO路徑優(yōu)化、智能條帶化技術(shù)來保障整個存儲平臺的高性能。
深信服EDS不僅在高可靠和高性能上面領(lǐng)先于業(yè)界,在易用性上也做了更人性化的設(shè)計。付忞表示,傳統(tǒng)存儲管理對運(yùn)維工程師的技術(shù)能力要求較高,特別是故障處理定位難度較大。深信服EDS在存儲集群管理的可視化設(shè)計上做得更加簡單明了易用,特別是融合了AI智能檢測,當(dāng)故障發(fā)生時可直接提供預(yù)警和解決方案,大大降低了運(yùn)維工程師的管理難度。普通運(yùn)維工程師經(jīng)過簡單培訓(xùn)即可上手。
正是基于上述關(guān)鍵技術(shù)和其他的定制化優(yōu)化,深信服EDS能給AI安防和智慧金融這些海量非結(jié)構(gòu)化數(shù)據(jù)的存儲場景及云存儲場景用戶帶來融合、高可靠、高性能的高端存儲服務(wù)體驗。目前,深信服EDS已服務(wù)珠海公安、深圳南山公安、福清電視臺、招商基金、深圳龍崗區(qū)圖書館、甘肅環(huán)境監(jiān)測中心、上海嘉定區(qū)政法委等用戶,幫助用戶解決數(shù)據(jù)存儲管理難題。