并且U10000通過(guò)統(tǒng)一的索引架構(gòu)實(shí)現(xiàn)多協(xié)議無(wú)損互通，這點(diǎn)非常重要。

馮相東表示，多協(xié)議無(wú)損互通指的是，不需要通過(guò)格式轉(zhuǎn)化就能讓對(duì)象存儲(chǔ)存進(jìn)來(lái)的數(shù)據(jù)，通過(guò)文件存儲(chǔ)方式來(lái)訪問(wèn)，或者文件存儲(chǔ)存進(jìn)來(lái)的數(shù)據(jù)可以通過(guò)對(duì)象存儲(chǔ)來(lái)訪問(wèn)。存儲(chǔ)和讀取數(shù)據(jù)之間不需要經(jīng)過(guò)格式轉(zhuǎn)化，這樣就避免了性能和語(yǔ)義的損失。

除此之外，多協(xié)議無(wú)損互通還可以提高數(shù)據(jù)分析的效率。

馮相東解釋稱(chēng)，一份數(shù)據(jù)在一個(gè)業(yè)務(wù)場(chǎng)景下可能需要多次利用，如果沒(méi)有協(xié)議互通的話，就需要多次Copy數(shù)據(jù)。比如，在A業(yè)務(wù)空間處理完后，再拷貝到B存儲(chǔ)空間，用另一種存儲(chǔ)協(xié)議來(lái)訪問(wèn)，不僅需要進(jìn)行數(shù)據(jù)遷移，還會(huì)額外占用存儲(chǔ)空間。

據(jù)介紹，這種一份數(shù)據(jù)需要經(jīng)過(guò)多個(gè)環(huán)節(jié)處理的場(chǎng)景越來(lái)越多，比如自動(dòng)駕駛、基因測(cè)序等場(chǎng)景。

自動(dòng)駕駛場(chǎng)景中，幾十輛路測(cè)車(chē)每天產(chǎn)生差不多1PB的路測(cè)數(shù)據(jù)，這些數(shù)據(jù)通常需要四個(gè)處理環(huán)節(jié)。

第一個(gè)環(huán)節(jié)是上傳和導(dǎo)入，通常需要用S3和NFS協(xié)議；第二個(gè)環(huán)節(jié)是數(shù)據(jù)預(yù)處理，主要用HDFS大數(shù)據(jù)分析相關(guān)技術(shù)；第三個(gè)環(huán)節(jié)是AI訓(xùn)練，以NFS協(xié)議為主；第四個(gè)環(huán)節(jié)涉及仿真測(cè)試，主要以NFS和SMB協(xié)議為主。

自動(dòng)駕駛的完整數(shù)據(jù)鏈的處理環(huán)節(jié)，需要一份數(shù)據(jù)通過(guò)不同的數(shù)據(jù)訪問(wèn)協(xié)議來(lái)訪問(wèn)，對(duì)接不同的計(jì)算框架，而協(xié)議互通明顯能提升數(shù)據(jù)分析的效率。

QingStor U10000作為一款分布式存儲(chǔ)，它具有所有分布式存儲(chǔ)必備的特征。比如：支持線性擴(kuò)展。U10000最低3節(jié)點(diǎn)起步，隨著節(jié)點(diǎn)數(shù)量的增長(zhǎng)，存儲(chǔ)容量和存儲(chǔ)集群的性能都會(huì)線性增長(zhǎng)。

U10000的存儲(chǔ)效率比較高。通過(guò)可靈活配置的EC糾刪碼，能讓整個(gè)集群的物理磁盤(pán)可用空間達(dá)到90%以上，存儲(chǔ)效率對(duì)于U10000這種超大容量存儲(chǔ)來(lái)說(shuō)，經(jīng)濟(jì)意義特別大。

U10000的性能表現(xiàn)也不錯(cuò)，在支持線性擴(kuò)展和EC糾刪碼技術(shù)的基礎(chǔ)上，能為海量小文件提供高性能讀寫(xiě)，單桶單目錄能支持百億級(jí)小文件存儲(chǔ)，并且能做到性能不衰減。

海量小文件的性能表現(xiàn)受到越來(lái)越多關(guān)注，比如，在機(jī)器學(xué)習(xí)場(chǎng)景中，就需要大量小文件，一些訓(xùn)練需要幾億甚至十幾億的文件，存儲(chǔ)性能問(wèn)題會(huì)嚴(yán)重影響訓(xùn)練效率。

馮相東表示，U10000基于Rust語(yǔ)言編寫(xiě)，在性能和安全性上有較大提升。

在數(shù)據(jù)安全性機(jī)制方面，數(shù)據(jù)層面采用的是多副本技術(shù)，而元數(shù)據(jù)則進(jìn)行了強(qiáng)一致性處理，元數(shù)據(jù)和存儲(chǔ)數(shù)據(jù)進(jìn)行了分層設(shè)計(jì)。此外，U10000還有多重訪問(wèn)安全機(jī)制、智能預(yù)警機(jī)制。

在運(yùn)維管理方面，提供了友好的可視化管理界面，可以更好地對(duì)存儲(chǔ)集群進(jìn)行各種配置、操作和監(jiān)控。

非結(jié)構(gòu)數(shù)據(jù)存儲(chǔ)創(chuàng)新實(shí)踐

U10000 其實(shí)已經(jīng)在非結(jié)構(gòu)數(shù)據(jù)存儲(chǔ)場(chǎng)景上有不少創(chuàng)新實(shí)踐。

慈銘體檢醫(yī)療集團(tuán)的體檢服務(wù)從預(yù)約階段到報(bào)告獲取都轉(zhuǎn)到了線上，體檢報(bào)告除了可以查看體檢數(shù)據(jù)，還可以查看健康態(tài)勢(shì)，背后依靠的是一套數(shù)據(jù)分析平臺(tái)。

青云幫助該醫(yī)療集團(tuán)構(gòu)建了業(yè)務(wù)承載平臺(tái)，使用了青云云易捷超融合平臺(tái)，存儲(chǔ)部分則是將數(shù)據(jù)與U10000對(duì)象存儲(chǔ)做對(duì)接后，實(shí)現(xiàn)了對(duì)PACS系統(tǒng)的影像數(shù)據(jù)進(jìn)行實(shí)時(shí)調(diào)取和長(zhǎng)期存儲(chǔ)，其中就用到了U10000協(xié)議互通的特性，實(shí)現(xiàn)了對(duì)象和文件互通，為AI醫(yī)療相關(guān)的創(chuàng)新應(yīng)用提供了便利。

某智能駕駛科技公司，其自動(dòng)駕駛研究業(yè)務(wù)的開(kāi)展離不開(kāi)高精度地圖，高精度地圖需要采集大量圖片和視頻數(shù)據(jù)，采集而來(lái)的數(shù)據(jù)需要經(jīng)過(guò)多重處理，需要與各種數(shù)據(jù)分析和數(shù)據(jù)存儲(chǔ)平臺(tái)交互，在這種場(chǎng)景下，U10000協(xié)議互通的優(yōu)勢(shì)也能得到充分發(fā)揮。

在早期，其所有業(yè)務(wù)都運(yùn)行在公有云上，處于安全方面的考慮，開(kāi)始構(gòu)建私有化的集群，由于該公司的規(guī)模比較大，對(duì)于服務(wù)提供商的能力要求也很高，青云的方案基本解決其高精度地圖從數(shù)據(jù)采集、生產(chǎn)、訓(xùn)練整個(gè)生命周期的存儲(chǔ)和算力需求。

蘇州華興源創(chuàng)是一家工業(yè)自動(dòng)測(cè)試設(shè)備與整線系統(tǒng)解決方案提供商，主要測(cè)試產(chǎn)品用于LCD、柔性O(shè)LED、半導(dǎo)體、新能源汽車(chē)電子等行業(yè)的生產(chǎn)廠家，以及為行業(yè)提供定制化的數(shù)據(jù)融合軟件平臺(tái)。

華興源創(chuàng)的數(shù)據(jù)挑戰(zhàn)來(lái)自自有數(shù)據(jù)中心的中臺(tái)、上層工廠流程再造、供應(yīng)鏈優(yōu)化以及安全保障四個(gè)方面，涉及到上百套業(yè)務(wù)系統(tǒng)，有各種各樣類(lèi)型的數(shù)據(jù)，業(yè)務(wù)平臺(tái)對(duì)存儲(chǔ)的需求也各不相同。

比如，關(guān)鍵業(yè)務(wù)數(shù)據(jù)需要有更多副本的存儲(chǔ)，對(duì)性能要求高的應(yīng)用需要全閃存的存儲(chǔ)配置，數(shù)據(jù)增長(zhǎng)快的應(yīng)用需要擴(kuò)展能力更強(qiáng)的存儲(chǔ)，而這些需求，絕大部分都由QingStor U10000來(lái)滿(mǎn)足，其余需求由NeonSAN塊存儲(chǔ)系統(tǒng)來(lái)滿(mǎn)足。

清華大學(xué)天津電子信息研究院是清華大學(xué)電子信息學(xué)科的 “產(chǎn)學(xué)研一體化”的成果轉(zhuǎn)化基地，其中的高端光電子芯片創(chuàng)新中心，從事芯片設(shè)計(jì)和開(kāi)發(fā)方面工作，有許多EDA（電子設(shè)計(jì)自動(dòng)化）設(shè)計(jì)需求，需要反復(fù)運(yùn)算、驗(yàn)證，所以，他們對(duì)于數(shù)據(jù)存儲(chǔ)系統(tǒng)的要求也很高。

EDA的前端設(shè)計(jì)階段會(huì)出現(xiàn)大量的隨機(jī)讀寫(xiě)操作，后端設(shè)計(jì)階段需要大量順序讀寫(xiě)操作，這對(duì)存儲(chǔ)系統(tǒng)的綜合能力要求很高，非?？简?yàn)分布式存儲(chǔ)架構(gòu)的設(shè)計(jì)能力，實(shí)際上，U10000也能很好地滿(mǎn)足其需求。

結(jié)束語(yǔ)

當(dāng)然，青云不純粹是一家存儲(chǔ)公司，它還有公有云、私有云、容器平臺(tái)、邊緣計(jì)算等各種方案，這些都決定了青云的存儲(chǔ)平臺(tái)不只是存儲(chǔ)，而是能對(duì)接各種算力平臺(tái)的，是一款經(jīng)過(guò)驗(yàn)證的存儲(chǔ)平臺(tái)。

正如青云產(chǎn)品技術(shù)解決方案總監(jiān)張忠華所言，不能孤立地談存儲(chǔ)場(chǎng)景，而是要和多元化算力一起談，因?yàn)椋缃竦钠髽I(yè)用戶(hù)越來(lái)越傾向于一個(gè)整體的方案，而不是組裝的方案。

換句話說(shuō)，用戶(hù)可能并不關(guān)心存儲(chǔ)，而更關(guān)心一套方案能為自己帶來(lái)什么。而這，正是青云作為不純粹的存儲(chǔ)公司的優(yōu)勢(shì)。

zhupb