10周年慶典現(xiàn)場(chǎng),曙光員工正給ParaStor慶生
存儲(chǔ)”十字路口”
ParaStor的10年,始于2009年夏天。
站在中科院計(jì)算所大樓,眺望施工不斷的中關(guān)村,已過(guò)而立之年的苗艷超,下定決心離開(kāi)工作多年的計(jì)算所去企業(yè)。
要去的企業(yè)名叫”曙光”,他要負(fù)責(zé)一款從無(wú)到有的存儲(chǔ)產(chǎn)品開(kāi)發(fā)。
當(dāng)時(shí),鮮有人談大數(shù)據(jù)、人工智能,少數(shù)國(guó)際廠商開(kāi)始講”分布式存儲(chǔ)”。站在存儲(chǔ)發(fā)展的十字路口,各大廠商開(kāi)始了對(duì)未來(lái)的爭(zhēng)奪。
2009年,Cisco宣布進(jìn)入服務(wù)器和存儲(chǔ)市場(chǎng),與此同時(shí)EMC參與NetApp競(jìng)購(gòu),并與Cisco、VMware兩家廠商結(jié)成VCE聯(lián)盟。Oracle收購(gòu)SUN公司,具備了存儲(chǔ)軟硬件一體的產(chǎn)品格局……
2009年”選擇”擺在了曙光人面前。
隨著曙光服務(wù)器進(jìn)入更多行業(yè)和領(lǐng)域,突破存儲(chǔ)瓶頸成為當(dāng)時(shí)要?jiǎng)?wù)。但此時(shí),曙光還未有自研的,滿(mǎn)足高并發(fā)IO需求的商業(yè)化存儲(chǔ)產(chǎn)品。
而苗艷超所在計(jì)算所智能中心,便一直研發(fā)有高并發(fā)IO特點(diǎn)的”集群文件系統(tǒng)”,但這些研究成果只停留在課題中,未形成商業(yè)化產(chǎn)品。
不到五人的研發(fā)團(tuán)隊(duì)
到曙光后,苗艷超的第一個(gè)難題便是”曙光存儲(chǔ)的技術(shù)路線(xiàn)要怎么走?”
“Parastor立項(xiàng)就面臨技術(shù)路線(xiàn)選擇問(wèn)題,一個(gè)是以磁盤(pán)陣列作為基礎(chǔ)部件;另一種是以x86架構(gòu)的高性能服務(wù)器為底層硬件,數(shù)據(jù)冗余機(jī)制由上層文件系統(tǒng)負(fù)責(zé)提供的分布式存儲(chǔ)系統(tǒng)。”苗艷超回憶。
此時(shí),為減少對(duì)大廠存儲(chǔ)技術(shù)依賴(lài),以及跟上”大數(shù)據(jù)”時(shí)代技術(shù)趨勢(shì),結(jié)合曙光自有的產(chǎn)品生態(tài)和優(yōu)勢(shì),苗艷超和同事選擇了更具前瞻性和挑戰(zhàn)的分布式存儲(chǔ)系統(tǒng)研發(fā)路線(xiàn)。
但此時(shí)加上苗艷超,初期的ParaStor研發(fā)團(tuán)隊(duì)只有不到5人,相比同類(lèi)廠商動(dòng)輒上百人的研發(fā)隊(duì)伍,連零頭都不到。
曙光存儲(chǔ)產(chǎn)品事業(yè)部總工程師 苗艷超
為加快研發(fā)進(jìn)度,當(dāng)時(shí)每人都領(lǐng)了不同產(chǎn)品領(lǐng)域去研究,經(jīng)常半夜誰(shuí)有想法就爬起來(lái)發(fā)郵件,一起討論可行性。
最終不到一年,ParaStor1.0便問(wèn)世了。如今看來(lái)ParaStor1.0很原始,僅支持副本冗余,沒(méi)有糾刪碼等如今”分布式”存儲(chǔ)系統(tǒng)必備的技術(shù),但它為ParaStor的發(fā)展明確了方向。
2010年,ParaStor從1.0升級(jí)到1.5,這是ParaStor第一個(gè)商業(yè)化軟件版本。為建口碑,當(dāng)時(shí)團(tuán)隊(duì)內(nèi)部定了一個(gè)目標(biāo),有BUG必須24小時(shí)內(nèi)解決。很多BUG都是當(dāng)天發(fā)現(xiàn),研發(fā)團(tuán)隊(duì)通宵修改,第二天客戶(hù)上班,BUG已解。
最終,初出茅廬的ParaStor以高性能和良好的擴(kuò)展性獲得首批客戶(hù)的認(rèn)可,該版本也為國(guó)內(nèi)首臺(tái)性能超千萬(wàn)億次的計(jì)算系統(tǒng)”曙光星云”,構(gòu)建了當(dāng)時(shí)國(guó)內(nèi)最大的單一存儲(chǔ)系統(tǒng)(16PB)。
此次成功部署,使得”曙光能做分布式存儲(chǔ)產(chǎn)品”的理念深入公司內(nèi)外,從此ParaStor步入了高速市場(chǎng)化發(fā)展軌道。
戰(zhàn)書(shū)
“三年后,曙光存儲(chǔ)要占領(lǐng)國(guó)內(nèi)10%的市場(chǎng)份額,進(jìn)入存儲(chǔ)主流市場(chǎng)”2012年7月,時(shí)任曙光存儲(chǔ)產(chǎn)品總監(jiān)惠潤(rùn)海,面對(duì)發(fā)布會(huì)現(xiàn)場(chǎng)記者立下戰(zhàn)書(shū)。
曙光存儲(chǔ)產(chǎn)品事業(yè)部總經(jīng)理惠潤(rùn)海
而打贏這場(chǎng)仗的排頭兵便是ParaStor。
惠潤(rùn)海立下戰(zhàn)書(shū)后不到半小時(shí),現(xiàn)場(chǎng)就有媒體提問(wèn)”在國(guó)際廠商搶先進(jìn)入市場(chǎng)的背景下,曙光靠什么獲得主流客戶(hù)的認(rèn)可?”
對(duì)此,惠潤(rùn)海表示,曙光的立身之本有兩點(diǎn):一是要靠自主研發(fā),掌握核心技術(shù),應(yīng)對(duì)海量數(shù)據(jù)增長(zhǎng)所帶來(lái)的一系列挑戰(zhàn);二是在行業(yè)深耕細(xì)作,通過(guò)對(duì)行業(yè)應(yīng)用的快速適配和深入優(yōu)化,打造差異化優(yōu)勢(shì),實(shí)現(xiàn)重點(diǎn)市場(chǎng)的逐個(gè)突破。
相比于2009年,此時(shí)已進(jìn)入”大數(shù)據(jù)元年”,中國(guó)互聯(lián)網(wǎng)產(chǎn)業(yè)在起飛。當(dāng)時(shí)IDC研究報(bào)告顯示,大數(shù)據(jù)技術(shù)和服務(wù)市場(chǎng)至2017年的增長(zhǎng)率可達(dá)27%,增速是整個(gè)信息和通訊技術(shù)市場(chǎng)的6倍。
但就在惠潤(rùn)海立戰(zhàn)書(shū)的幾天前,連媒體也沒(méi)幾人知道ParaStor。不知道ParaStor的,還有將成為ParaStor研發(fā)工程師的郭洋。
2012年,在國(guó)內(nèi)某IT大廠做存儲(chǔ)產(chǎn)品的郭洋,決定從原先安穩(wěn)的公司來(lái)到曙光。但在網(wǎng)上搜索自己要在新單位開(kāi)發(fā)的產(chǎn)品”ParaStor”,卻找不到太多信息。
“當(dāng)時(shí)的分布式存儲(chǔ)還是國(guó)際大廠的天下,國(guó)內(nèi)的產(chǎn)品嚴(yán)格上講僅有兩家,曙光算一個(gè)。此外,當(dāng)時(shí)類(lèi)型相近的國(guó)際大廠分布式存儲(chǔ)產(chǎn)品價(jià)格是國(guó)產(chǎn)產(chǎn)品的五到十倍。”郭洋回憶。
采用ParaStor存儲(chǔ)平臺(tái)的山西先進(jìn)計(jì)算中心
做到極致
當(dāng)時(shí)ParaStor面臨的最大問(wèn)題之一,就是如何提升存儲(chǔ)空間利用率,根據(jù)團(tuán)隊(duì)之前的積累,實(shí)現(xiàn)這點(diǎn)對(duì)郭洋和他的團(tuán)隊(duì)并不算挑戰(zhàn)。但相應(yīng)的產(chǎn)品測(cè)試與驗(yàn)證調(diào)優(yōu),則是考驗(yàn)團(tuán)隊(duì)專(zhuān)業(yè)性的時(shí)候。”要考慮用戶(hù)端可能出現(xiàn)的各種情況,要做多種排列組合數(shù)量的測(cè)試和優(yōu)化。”郭洋說(shuō)。
在實(shí)現(xiàn)ParaStor升級(jí)的過(guò)程中,郭洋也理解”做到極致”的曙光產(chǎn)品理念,以及曙光存儲(chǔ)堅(jiān)持自研的原因。
在一個(gè)CANU三代基因組裝測(cè)試項(xiàng)目中,用戶(hù)要求曙光ParaStor的性能必須超越某廠商宣稱(chēng)的”代表業(yè)界最高性能”的同類(lèi)產(chǎn)品,才考慮把其業(yè)務(wù)遷移到曙光平臺(tái)上。
面對(duì)新挑戰(zhàn),郭洋和同事在兩周內(nèi),將整個(gè)業(yè)務(wù)流程各階段(涉及幾十個(gè)進(jìn)程)的數(shù)據(jù)IO特點(diǎn)梳理成報(bào)告,并同同事一起從底層代碼逐一調(diào)優(yōu),最終用戶(hù)計(jì)算用時(shí)從9.2小時(shí)降低到7.3小時(shí),實(shí)測(cè)性能超過(guò)友商20%以上。
就在郭洋和同事精益求精,不斷將ParaStor產(chǎn)品性能做到極致時(shí),市場(chǎng)也向曙光遞來(lái)了橄欖枝。
2013年,ParaStor2.0版本發(fā)布,增強(qiáng)了數(shù)據(jù)保護(hù)機(jī)制,可為用戶(hù)構(gòu)建數(shù)據(jù)全生命周期管理的一體化方案。同年,ParaStor為央視國(guó)際打造6PB存儲(chǔ)資源池,并在全國(guó)多地中標(biāo)氣象局、環(huán)保局項(xiàng)目。
2015年,據(jù)IDC報(bào)告顯示ParaStor在國(guó)內(nèi)NAS市場(chǎng)排名位居第一,營(yíng)收同比增長(zhǎng)42.6%,占全部NAS存儲(chǔ)市場(chǎng)份額21.6%。三年前惠潤(rùn)海下的戰(zhàn)書(shū)達(dá)成了,直到今天ParaStor一直保持國(guó)內(nèi)NAS存儲(chǔ)市場(chǎng)占有率的前兩位。
多元化需求 本地化服務(wù)
2018年夏的一天夜里兩點(diǎn),在睡夢(mèng)中的曙光存儲(chǔ)運(yùn)維工程師呂山被客戶(hù)的電話(huà)驚醒。
當(dāng)時(shí)一位江蘇的視頻存儲(chǔ)業(yè)務(wù)客戶(hù),因操作不當(dāng)導(dǎo)致后臺(tái)出問(wèn)題。呂山立刻利用客戶(hù)提供的安全通道登錄系統(tǒng),查看日志,最終與同事一起找到問(wèn)題并解決。
存儲(chǔ)作為數(shù)據(jù)中心的核心之一,任何架構(gòu)、系統(tǒng)、應(yīng)用的變化都有可能導(dǎo)致問(wèn)題。這就需要曙光的存儲(chǔ)運(yùn)維人員耐心、負(fù)責(zé)地提供各種咨詢(xún)、服務(wù)支持。
半夜接到客戶(hù)電話(huà),對(duì)于呂山和同事是常有的事。
2015年前后,隨ParaStor產(chǎn)品銷(xiāo)量增長(zhǎng),運(yùn)維壓力增加。”行業(yè)不同,客戶(hù)運(yùn)維人員水平不一,導(dǎo)致運(yùn)維的個(gè)性化需求不同、復(fù)雜度增加,這就需要我們堅(jiān)持本土化服務(wù),解決用戶(hù)痛點(diǎn)。”ParaStor產(chǎn)品經(jīng)理石冬林說(shuō)。
河北姑娘石冬林,2012年研究生畢業(yè)即加入曙光存儲(chǔ)產(chǎn)品線(xiàn),2015年起擔(dān)任ParaStor產(chǎn)品經(jīng)理,主要負(fù)責(zé)分布式存儲(chǔ)產(chǎn)品定義、市場(chǎng)推廣與運(yùn)營(yíng)工作。
市場(chǎng)對(duì)存儲(chǔ)產(chǎn)品的要求也趨于多元,相比滿(mǎn)足單一的云服務(wù)、虛擬化等應(yīng)用,如今客戶(hù)希望不同應(yīng)用之間實(shí)現(xiàn)數(shù)據(jù)靈活流動(dòng)。
ParaStor如何應(yīng)對(duì)新市場(chǎng)的挑戰(zhàn),成為石冬林和同事不斷思考的問(wèn)題。目前石冬林給出的方案之一是”融合”。
“融合性,簡(jiǎn)單舉例來(lái)說(shuō),就是ParaStor除了支持文件、對(duì)象存儲(chǔ)外,今后還要支持塊存儲(chǔ)。一套存儲(chǔ)應(yīng)對(duì)用戶(hù)不同的業(yè)務(wù)需求,實(shí)現(xiàn)融合。”石冬林說(shuō)。
相比傳統(tǒng)分布式存儲(chǔ)產(chǎn)品,如今曙光ParaStor已成為省、市級(jí)別先進(jìn)計(jì)算中心的首選存儲(chǔ)平臺(tái)。”在先進(jìn)計(jì)算中心,ParaStor融合非結(jié)構(gòu)化與結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ),融合通用計(jì)算、大數(shù)據(jù)、AI等業(yè)務(wù)應(yīng)用”石冬林介紹。
“昨天已過(guò)去,明天仍是挑戰(zhàn)”
曙光存儲(chǔ)事業(yè)部總經(jīng)理惠潤(rùn)海表示,”ParaStor產(chǎn)品歷經(jīng)十年發(fā)展,過(guò)程特別不易,測(cè)試、產(chǎn)品、售前到售后支持都非常不容易。所有人都全身心地投入其中,就像呵護(hù)自家寶貝一樣陪伴她成長(zhǎng)。”
在誕生10年之際,曙光表示這個(gè)”小寶貝”的最新版本——ParaStor300S,實(shí)現(xiàn)了融合存儲(chǔ)架構(gòu),集群存儲(chǔ)系統(tǒng)可對(duì)外統(tǒng)一提供文件、對(duì)象、塊等存儲(chǔ)協(xié)議。此外,曙光ParaStor產(chǎn)品明確三大發(fā)展方向:本土化、閃存化、融合智能,領(lǐng)跑數(shù)字經(jīng)濟(jì)時(shí)代。
經(jīng)過(guò)十年發(fā)展,如今ParaStor管理著數(shù)EB存儲(chǔ)空間,實(shí)現(xiàn)了TB級(jí)訪問(wèn)帶寬。服務(wù)對(duì)象遍及氣象、能源、生物、金融、廣電、交通等多個(gè)行業(yè)。IDC排名連續(xù)7年位居國(guó)內(nèi)NAS存儲(chǔ)市場(chǎng)前二位;而曙光ParaStor產(chǎn)品、研發(fā)團(tuán)隊(duì),也從最早不足5人,發(fā)展到如今數(shù)百人。
“昨天已經(jīng)過(guò)去了,明天仍充滿(mǎn)挑戰(zhàn)”惠潤(rùn)海最后表示,ParaStor十年取得的成績(jī)令人振奮,但我們還有更高的目標(biāo),今后仍面臨挑戰(zhàn)。”未來(lái)10年,我們將繼續(xù)專(zhuān)注技術(shù)、扎根本土、主動(dòng)創(chuàng)新的傳統(tǒng),更貼近用戶(hù)應(yīng)用,不斷滿(mǎn)足中國(guó)存儲(chǔ)用戶(hù)需求。”惠潤(rùn)海說(shuō)。
曙光存儲(chǔ)團(tuán)隊(duì)
后記:
“十年去了,少年志猶在”
“如果對(duì)明天沒(méi)有要求”便不會(huì)有曙光分布式存儲(chǔ)產(chǎn)品ParaStor的10年。
技術(shù)迭代加速,IT產(chǎn)業(yè)競(jìng)爭(zhēng)加劇。在莫測(cè)的市場(chǎng)環(huán)境中,只有持之以恒做好一件事,別無(wú)旁顧打造”極致產(chǎn)品”,持續(xù)為行業(yè)、用戶(hù)創(chuàng)造核心價(jià)值,才能免于被時(shí)代所淘汰。
將以上簡(jiǎn)單的道理付諸實(shí)踐,堅(jiān)持10年,這或許便是曙光人的發(fā)展和成功之道。