首發(fā)數(shù)據(jù)生產(chǎn)力模型,推動(dòng)企業(yè)提質(zhì)增效
基于十多年內(nèi)外部數(shù)字化轉(zhuǎn)型實(shí)踐,網(wǎng)易數(shù)帆可提供前沿的、高性能的大數(shù)據(jù)技術(shù)工具和平臺(tái)來支撐企業(yè)的數(shù)據(jù)應(yīng)用。大會(huì)現(xiàn)場(chǎng)首發(fā)“數(shù)據(jù)生產(chǎn)力模型”,通過數(shù)字化實(shí)踐經(jīng)驗(yàn)?zāi)P椭ζ髽I(yè)數(shù)字化轉(zhuǎn)型目標(biāo)達(dá)成,為企業(yè)實(shí)現(xiàn)提質(zhì)增效。
模型定義為充分利用大數(shù)據(jù)相關(guān)技術(shù), 協(xié)助行業(yè)客戶沉淀數(shù)據(jù)資產(chǎn), 探索在業(yè)務(wù)場(chǎng)景中的數(shù)據(jù)應(yīng)用價(jià)值, 并通過數(shù)據(jù)運(yùn)營發(fā)揮長期效用。模型包含DataOps、DataFusion、DataProduct三大內(nèi)核和數(shù)據(jù)技術(shù)、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)應(yīng)用、數(shù)據(jù)運(yùn)營四要素,聚焦金融、制造、醫(yī)藥、流通等行業(yè)。從業(yè)務(wù)場(chǎng)景中挖掘數(shù)據(jù)價(jià)值,進(jìn)一步釋放企業(yè)數(shù)據(jù)生產(chǎn)力。
夯實(shí)先進(jìn)大數(shù)據(jù)技術(shù),進(jìn)一步完善DataOps能力
隨著數(shù)字化進(jìn)程加速,當(dāng)前企業(yè)大數(shù)據(jù)基礎(chǔ)設(shè)施的發(fā)展也面臨信創(chuàng)加速、架構(gòu)解耦、云原生化、流式湖倉的建設(shè)等種種挑戰(zhàn)。為了應(yīng)對(duì)數(shù)字化潛在風(fēng)險(xiǎn),網(wǎng)易數(shù)帆不斷升級(jí)優(yōu)化產(chǎn)品功能與技術(shù),進(jìn)一步完善DataOps能力。
作為網(wǎng)易數(shù)帆數(shù)據(jù)生產(chǎn)力模型三大重要內(nèi)核之一, DataOps是一種將軟件工程CI/CD的方法融入數(shù)據(jù)開發(fā)的流程,基于自動(dòng)化的數(shù)據(jù)測(cè)試、任務(wù)發(fā)布等技術(shù),構(gòu)建數(shù)據(jù)發(fā)布流水線,使得數(shù)據(jù)開發(fā)效率更高、交付更加頻繁,交付質(zhì)量更有保障。
網(wǎng)易數(shù)帆在DataOps實(shí)踐中發(fā)現(xiàn)了一系列發(fā)布審核的問題,如任務(wù)發(fā)布時(shí)資源遺漏,多集群、多環(huán)境任務(wù)發(fā)布難題等。
為此,網(wǎng)易數(shù)帆發(fā)布了全新的任務(wù)發(fā)布中心,進(jìn)一步完善了網(wǎng)易數(shù)帆DataOps產(chǎn)品體系。在實(shí)際應(yīng)用中,有諸多金融券商客戶,對(duì)數(shù)據(jù)開發(fā)有著嚴(yán)格的監(jiān)管要求,需要有如測(cè)試、預(yù)發(fā)、生產(chǎn)等多套環(huán)境來保障數(shù)據(jù)的隔離和安全。而現(xiàn)有平臺(tái)雖然支持部署多套,但是無法進(jìn)行高效的任務(wù)發(fā)布,只能通過人工方式進(jìn)行重復(fù)的創(chuàng)建、開發(fā)、上線等操作,成本高且極易出問題??蛻糌叫韪咝?、安全的產(chǎn)品能力來支持這類繁重的工作。
任務(wù)發(fā)布中心支持跨集群的資源發(fā)布能力,支持資源的批量導(dǎo)出和導(dǎo)入功能,可實(shí)現(xiàn)網(wǎng)絡(luò)隔離場(chǎng)景下的跨集群發(fā)布。
本次大會(huì)還有一個(gè)重要環(huán)節(jié),《從數(shù)據(jù)中臺(tái)到數(shù)據(jù)生產(chǎn)力 ——網(wǎng)易數(shù)據(jù)建設(shè)實(shí)踐》新書首發(fā)。這也是網(wǎng)易數(shù)帆大數(shù)據(jù)團(tuán)隊(duì)總結(jié)經(jīng)驗(yàn)、沉淀技術(shù)的匠心之作,希望啟發(fā)更多企業(yè)探索出符合自身特色的數(shù)字化之路。
開發(fā)治理一體化,全方位沉淀企業(yè)數(shù)據(jù)資產(chǎn)
在數(shù)字經(jīng)濟(jì)時(shí)代下,數(shù)據(jù)日益成為重要戰(zhàn)略資源和生產(chǎn)要素。因此,企業(yè)紛紛在數(shù)字化轉(zhuǎn)型過程中開始構(gòu)建大數(shù)據(jù)相關(guān)的技術(shù)平臺(tái),而在此過程中暴露出了一些問題,如:數(shù)據(jù)開發(fā)與數(shù)據(jù)治理脫節(jié)、缺少對(duì)不同平臺(tái)的統(tǒng)一管理、數(shù)據(jù)開發(fā)過程中效率和質(zhì)量無法兼顧、煙囪式的數(shù)據(jù)開發(fā)、對(duì)數(shù)據(jù)價(jià)值和成本的評(píng)估不足等。
為了解決此問題,網(wǎng)易數(shù)帆將傳統(tǒng)數(shù)據(jù)治理的方法融入數(shù)據(jù)開發(fā)的全生命周期中,基于DataOps全生命周期數(shù)據(jù)開發(fā)底座,采用數(shù)據(jù)中臺(tái)架構(gòu),結(jié)合網(wǎng)易特色的基于ROI的數(shù)據(jù)資產(chǎn)化實(shí)踐,形成了數(shù)據(jù)治理2.0的方法論。
該方法論的核心內(nèi)涵為“數(shù)據(jù)開發(fā)和數(shù)據(jù)治理一體化”理念,即“先設(shè)計(jì)后開發(fā)”,可以理解為一邊開發(fā),一邊治理,其目標(biāo)就是將數(shù)據(jù)標(biāo)準(zhǔn)定義、指標(biāo)規(guī)范定義、模型設(shè)計(jì)和數(shù)據(jù)開發(fā)體系連接在一起,以設(shè)計(jì)驅(qū)動(dòng)開發(fā),在開發(fā)的過程中保障數(shù)據(jù)標(biāo)準(zhǔn),數(shù)據(jù)質(zhì)量,數(shù)據(jù)安全的落地,以達(dá)到“事半功倍”的治理效果。
網(wǎng)易數(shù)帆的數(shù)據(jù)治理體系,既包括傳統(tǒng)數(shù)據(jù)治理的三大件:數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn),還包括了數(shù)據(jù)中臺(tái)的相關(guān)系統(tǒng),例如指標(biāo)系統(tǒng)、模型設(shè)計(jì)中心和數(shù)據(jù)服務(wù)等。通過實(shí)現(xiàn)數(shù)據(jù)治理體系升級(jí),將數(shù)據(jù)治理的流程自然融入數(shù)據(jù)開發(fā)的全生命周期過程中,在數(shù)據(jù)開發(fā)的過程中,就完成數(shù)據(jù)治理。通過指標(biāo)和數(shù)據(jù)標(biāo)準(zhǔn)的定義實(shí)現(xiàn)“規(guī)范即設(shè)計(jì),設(shè)計(jì)即開發(fā),開發(fā)即治理”,讓數(shù)據(jù)“找得到,看得懂,信得過”,進(jìn)而為企業(yè)提供及時(shí)、準(zhǔn)確、復(fù)用、有價(jià)值的數(shù)據(jù)資產(chǎn)。
在數(shù)據(jù)治理領(lǐng)域,網(wǎng)易數(shù)帆也取得了不俗成績。有數(shù)數(shù)據(jù)治理平臺(tái)榮獲2022CCF大數(shù)據(jù)與計(jì)算智能大賽”優(yōu)秀案例獎(jiǎng)“、2021-2022大數(shù)據(jù)產(chǎn)業(yè)優(yōu)秀產(chǎn)品獎(jiǎng)等諸多獎(jiǎng)項(xiàng)。 并在東北證券、德邦快遞等多位行業(yè)客戶實(shí)踐落地。
“未來,網(wǎng)易數(shù)帆會(huì)持續(xù)做好數(shù)據(jù)治理,打磨全鏈路大數(shù)據(jù)產(chǎn)品和技術(shù)能力,充分激活數(shù)據(jù)生產(chǎn)要素的活力,將企業(yè)的數(shù)據(jù)價(jià)值與業(yè)務(wù)變現(xiàn)相結(jié)合,并最終沉淀為企業(yè)數(shù)據(jù)資產(chǎn),助力各個(gè)行業(yè)企業(yè)數(shù)字化轉(zhuǎn)型發(fā)展”,余利華說。