2020年8月18日,在杉巖數(shù)據(jù)的品牌戰(zhàn)略暨新品發(fā)布會(huì)上,CEO陳堅(jiān)介紹說(shuō),杉巖數(shù)據(jù)最大單一存儲(chǔ)集群規(guī)模達(dá)到了2EB。按照上述粗獷的估算方法,大概需要20萬(wàn)塊硬盤(pán),一塊3.5寸的盤(pán)大約600g,20萬(wàn)塊大概是12噸,普通轎車(chē)的重量大約在1.5到2噸,算下來(lái)就是6到8輛轎車(chē)的重量,夠形象了吧。

杉巖數(shù)據(jù)CEO

韓信點(diǎn)兵,多多益善,大規(guī)模軍隊(duì)作戰(zhàn)難點(diǎn)在于如何高效地組織起有效的進(jìn)攻和防守,對(duì)將領(lǐng)的要求非常高。而杉巖數(shù)據(jù)組織20萬(wàn)塊硬盤(pán)的操作同樣考慮組織能力,杉巖靠的是軟件層次上的創(chuàng)新,將成千上萬(wàn)個(gè)硬盤(pán)組織起來(lái)構(gòu)成一個(gè)集群,在技術(shù)上也是非常大的挑戰(zhàn)。

2EB最大單一存儲(chǔ)集群的出現(xiàn),是用戶(hù)用行動(dòng)證明了對(duì)于杉巖數(shù)據(jù)這樣一家存儲(chǔ)公司的認(rèn)可。如此大規(guī)模的部署案例,這家分布式存儲(chǔ)公司再也不能低調(diào)了。

杉巖數(shù)據(jù)是誰(shuí)?

杉巖數(shù)據(jù)是一家來(lái)自深圳的軟件定義存儲(chǔ)廠商,杉巖數(shù)據(jù)的名字音譯自SandStone(砂巖),砂巖是一種沉積巖,主要組成是地殼最常見(jiàn)的成分,而杉巖數(shù)據(jù)做的軟件定義存儲(chǔ)依靠的是最常見(jiàn)的通用服務(wù)器,在此基礎(chǔ)上加入軟件存儲(chǔ)系統(tǒng)。

從IDC給出的市場(chǎng)數(shù)據(jù)來(lái)看,杉巖數(shù)據(jù)在中國(guó)對(duì)象存儲(chǔ)市場(chǎng)份額排在第二位,在塊存儲(chǔ)市場(chǎng)也排在第五位,整體軟件定義存儲(chǔ)市場(chǎng)份額能達(dá)到第六位,是一家主流的軟件定義存儲(chǔ)廠商,在市場(chǎng)上扮演重要角色。

企業(yè)級(jí)存儲(chǔ)市場(chǎng)通常需要慢工出細(xì)活兒。杉巖數(shù)據(jù)成立于2014年,僅僅六年后的2020年就有如此成績(jī)還是非常令人羨慕的,不久前,杉巖數(shù)據(jù)還宣布獲得了1.5億人民幣的B+輪融資,收獲市場(chǎng)和資本雙重認(rèn)可,在品牌戰(zhàn)略暨新品發(fā)布會(huì)上,還有有包括華為和阿里云等技術(shù)合作伙伴,以及許多行業(yè)用戶(hù)站臺(tái)。

杉巖數(shù)據(jù)的崛起之路

2014年,在深圳一個(gè)不到三十平的民房里,有幾位碼農(nóng)在電腦前忙碌著,一位中年男子,一會(huì)兒負(fù)責(zé)做飯,一會(huì)兒負(fù)責(zé)掃地,燈泡壞了估計(jì)還是他負(fù)責(zé)換,這位中年男子就是陳堅(jiān),而這,就是杉巖數(shù)據(jù)創(chuàng)始成員最早的辦公地點(diǎn),團(tuán)隊(duì)成員除了陳堅(jiān)以外,另外幾位小伙伴全都負(fù)責(zé)寫(xiě)代碼。

杉巖數(shù)據(jù)的初始創(chuàng)始成員包括陳堅(jiān)在內(nèi),主要都來(lái)自華為的企業(yè)存儲(chǔ)業(yè)務(wù)部門(mén),原本做的業(yè)務(wù)就與分布式存儲(chǔ)相關(guān),對(duì)普通人來(lái)說(shuō)從華為出走其實(shí)需要不少勇氣,華為待遇其實(shí)非常好,2014年的華為存儲(chǔ)也正處于快速成長(zhǎng)期,眼看著業(yè)務(wù)蒸蒸日上其實(shí)想走更難,創(chuàng)業(yè)很累不說(shuō),還要很多不確定性,除非是對(duì)要做的事情非常有把握。

2014年,開(kāi)源云的浪潮襲來(lái),以O(shè)penStack為代表的開(kāi)源云方案收獲大量擁躉,中國(guó)技術(shù)才趕上了這波浪潮,與全世界開(kāi)源愛(ài)好者一道做起了開(kāi)源云,軟件開(kāi)發(fā)者越發(fā)意識(shí)到了軟件所能創(chuàng)造的價(jià)值,有人說(shuō)軟件能定義一切,對(duì)于做基礎(chǔ)技術(shù)的人而言,軟件定義存儲(chǔ)也從概念一步步變?yōu)楝F(xiàn)實(shí)。

Ceph作為OpenStack推薦的存儲(chǔ)方案,也很快變得家喻戶(hù)曉,使用OpenStack和Ceph的企業(yè)用戶(hù)也非常多,以電信運(yùn)營(yíng)商為主的大型企業(yè)客戶(hù)在大規(guī)模使用OpenStack方案。同時(shí),國(guó)內(nèi)出現(xiàn)了許多基于Ceph的開(kāi)源存儲(chǔ)解決方案供應(yīng)商,杉巖數(shù)據(jù)就是其中的典型代表。

基于Ceph開(kāi)源項(xiàng)目做企業(yè)級(jí)存儲(chǔ)方案并不容易,Ceph只是技術(shù)方案,而企業(yè)對(duì)于存儲(chǔ)方案的穩(wěn)定性和可靠性要求非常高,將技術(shù)轉(zhuǎn)變?yōu)榻?jīng)過(guò)驗(yàn)證的產(chǎn)品方案需要經(jīng)過(guò)長(zhǎng)期的打磨過(guò)程,各種辛苦只有杉巖自己最懂。

2020年8月18日,杉巖數(shù)據(jù)六周年前夕召開(kāi)的這次品牌戰(zhàn)略暨新品發(fā)布會(huì),是杉巖數(shù)據(jù)第一次正式的發(fā)布會(huì),標(biāo)志著杉巖數(shù)據(jù)正式走上臺(tái)前,結(jié)束了低調(diào)期。

CEO陳堅(jiān)將過(guò)去六年分為兩個(gè)階段,2014年到2017年期間是產(chǎn)品打磨期,打磨產(chǎn)品的可靠性、穩(wěn)定性、可用性和可維護(hù)性,先是2015年發(fā)布了杉巖統(tǒng)一存儲(chǔ)平臺(tái)USP,隨后2016年發(fā)布海量對(duì)象存儲(chǔ)MOS,應(yīng)對(duì)海量非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的場(chǎng)景。這一階段積累了第一批行業(yè)頭部客戶(hù),比如中國(guó)移動(dòng)、深圳供電局、廣發(fā)證券等。

第二階段,產(chǎn)品趨于成熟的同時(shí)開(kāi)始大規(guī)模推向市場(chǎng),很快,市場(chǎng)取得了突飛猛進(jìn)的成果,在金融、電力、能源、醫(yī)療、教育等等十多個(gè)行業(yè)和20多個(gè)應(yīng)用場(chǎng)景收獲500+客戶(hù),上線(xiàn)的總?cè)萘砍^(guò)了3000PB,單一集群數(shù)據(jù)規(guī)模2EB達(dá)到中國(guó)最大。

此外,杉巖還是中國(guó)云計(jì)算標(biāo)準(zhǔn)單位成員之一,中國(guó)去年發(fā)布的云存儲(chǔ)的國(guó)標(biāo)中杉巖是參與標(biāo)準(zhǔn)制定的單位,行業(yè)影響力提升。

從2014年到2020年,杉巖數(shù)據(jù)在6年內(nèi)總共完成了4輪融資,包括天璣數(shù)據(jù)、順為資本、廣發(fā)乾和、深圳擔(dān)保集團(tuán)、中遠(yuǎn)海運(yùn)、襄禾資本以及無(wú)錫金投都是杉巖數(shù)據(jù)的投資方,有行業(yè)和政府方面的資金,資金方全都是以人民幣的方式注資。

陳堅(jiān)強(qiáng)調(diào),杉巖數(shù)據(jù)是一家技術(shù)驅(qū)動(dòng)型公司,200名員工中有60%都是研發(fā)人員,但企業(yè)級(jí)存儲(chǔ)產(chǎn)品的研發(fā)要靠技術(shù)更要靠經(jīng) 驗(yàn),杉巖數(shù)據(jù)的核心研發(fā)人員,平均在存儲(chǔ)領(lǐng)域研發(fā)經(jīng)驗(yàn)在7年以上,杉巖數(shù)據(jù)有一支強(qiáng)大的研發(fā)隊(duì)伍,為杉巖數(shù)據(jù)貢獻(xiàn)了40多項(xiàng)發(fā)明和專(zhuān)利。

如今的杉巖數(shù)據(jù)儼然已是一家獨(dú)立的存儲(chǔ)新勢(shì)力。

杉巖數(shù)據(jù)的發(fā)展要點(diǎn)與技術(shù)創(chuàng)新

作為存儲(chǔ)行業(yè)的老兵,陳堅(jiān)將存儲(chǔ)發(fā)展總結(jié)為三個(gè)階段,第一階段的重點(diǎn)是存好數(shù)據(jù),第二階段是管理好各種數(shù)據(jù),當(dāng)下所處的第三階段是用好數(shù)據(jù),這個(gè)時(shí)代的特征是智能。陳堅(jiān)認(rèn)為,真正的智能存儲(chǔ)應(yīng)該具有數(shù)據(jù)感知和應(yīng)用感知的能力,存儲(chǔ)系統(tǒng)能夠幫助上層應(yīng)用做數(shù)據(jù)的處理和智能的調(diào)度,幫助應(yīng)用做加速和優(yōu)化。

智能是杉巖數(shù)據(jù)未來(lái)的一大發(fā)展方向,發(fā)布會(huì)現(xiàn)場(chǎng),杉巖數(shù)據(jù)發(fā)布了新一代杉巖融合智能大數(shù)據(jù)存儲(chǔ)解決方案,另外一個(gè)重點(diǎn)是國(guó)產(chǎn)自主可控,為此,杉巖發(fā)布了華巖安全存儲(chǔ)一體化解決方案。

杉巖數(shù)據(jù)的對(duì)象存儲(chǔ)是傳統(tǒng)強(qiáng)項(xiàng),杉巖數(shù)據(jù)CTO邱尚高介紹了對(duì)象存儲(chǔ)的最新消息。新的對(duì)象存儲(chǔ)V6版本在存的能力上有突破,文件規(guī)模理論上可以達(dá)到1000億,單桶文件數(shù)支持30億個(gè)。通常情況下,文件數(shù)的增多將影響到性能表現(xiàn),但杉巖數(shù)據(jù)的整體系統(tǒng)性能表現(xiàn)非常平穩(wěn),性能僅下降10%。

與阿里云深度合作構(gòu)建強(qiáng)化版混合云。以前許多混合云都只是能將本地存儲(chǔ)的數(shù)據(jù)歸檔到公有云上,而杉巖數(shù)據(jù)與阿里云構(gòu)建的混合云能進(jìn)行雙向數(shù)據(jù)同步,不僅如此,業(yè)務(wù)還能同時(shí)在公有云和私有云上運(yùn)行,還可以進(jìn)行業(yè)務(wù)的平滑遷移。

強(qiáng)化異構(gòu)納管能力。在異構(gòu)方面,V6版本能夠納管如開(kāi)源的對(duì)象存儲(chǔ)、金融行業(yè)應(yīng)用較多的Documentum、FileNet、 FastDFS等第三方的對(duì)象存儲(chǔ),幫助客戶(hù)縮短數(shù)據(jù)遷移時(shí)間,保護(hù)用戶(hù)現(xiàn)有投資。

智能處理引擎功能。在杉巖對(duì)象存儲(chǔ)里面,可以用插件對(duì)各種處理組件(OCR識(shí)別,或者全文識(shí)別,或者人臉識(shí)別、車(chē)輛識(shí)別、機(jī)器學(xué)習(xí)領(lǐng)域等等)進(jìn)行結(jié)合,將非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù),提升數(shù)據(jù)的價(jià)值和使用效率,為AI、機(jī)器學(xué)習(xí)等領(lǐng)域的業(yè)務(wù)賦能。

MosFS主要解決了機(jī)器學(xué)習(xí)對(duì)于高吞吐和低時(shí)延的需求問(wèn)題,在上層利用內(nèi)存以及SSD等技術(shù)來(lái)加速數(shù)據(jù)訪(fǎng)問(wèn)。同時(shí),結(jié)合業(yè)務(wù)感知能力,為數(shù)據(jù)做一層高速緩存來(lái)保障機(jī)器學(xué)習(xí)的性能。MosFS還可以把計(jì)算存儲(chǔ)的本地存盤(pán)組成一個(gè)分布式的緩存層,加快訓(xùn)練速度。

面向大數(shù)據(jù),杉巖對(duì)象存儲(chǔ)通過(guò)替換傳統(tǒng)HDFS存儲(chǔ)來(lái)降低成本并提高性能,做法是提供兼容HDFS的接口,把HDFS的數(shù)據(jù)歸集到統(tǒng)一的存儲(chǔ)上,幫助客戶(hù)實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)跟半結(jié)構(gòu)化數(shù)據(jù)或者結(jié)構(gòu)化數(shù)據(jù)的完全統(tǒng)一。

華巖國(guó)產(chǎn)化一體機(jī)是一款統(tǒng)一存儲(chǔ)產(chǎn)品,這款產(chǎn)品是基于統(tǒng)一存儲(chǔ)產(chǎn)品軟件構(gòu)建的產(chǎn)品,底層采用國(guó)產(chǎn)處理器和國(guó)產(chǎn)服務(wù)器,對(duì)外提供標(biāo)準(zhǔn)的塊存儲(chǔ)以及標(biāo)準(zhǔn)的文件接口和對(duì)象接口,滿(mǎn)足復(fù)合型的業(yè)務(wù)要求。目前該產(chǎn)品底層處理器支持華為鯤鵬,飛騰,海光,操作系統(tǒng)采用基于信創(chuàng)的麒麟和統(tǒng)信操作系統(tǒng)。

結(jié)語(yǔ)

2020年8月的這次品牌戰(zhàn)略暨新品發(fā)布會(huì)是杉巖數(shù)據(jù)第一次正式發(fā)布會(huì),高調(diào)介紹2EB最大單一存儲(chǔ)集群的項(xiàng)目,高調(diào)進(jìn)行產(chǎn)品發(fā)布,這意味著韜光養(yǎng)晦的日子正式告一段落了。

分享到

zhupb

相關(guān)推薦