史凱（凱哥）精益數(shù)據(jù)方法論創(chuàng)始人
“凱哥講故事”公眾號作者從業(yè)20余年，程序員出身，近10年聚焦于利用數(shù)據(jù)和人工智能技術，幫助企業(yè)打造數(shù)據(jù)能力，構(gòu)建業(yè)務價值，助力眾多企業(yè)實現(xiàn)數(shù)字化轉(zhuǎn)型。
數(shù)據(jù)創(chuàng)造價值的四大阻力
每個企業(yè)都希望自己成為數(shù)據(jù)驅(qū)動的企業(yè)，但對于眾多企業(yè)，數(shù)據(jù)創(chuàng)造價值存在四大阻力。首先對齊一個思想和概念，數(shù)據(jù)已經(jīng)成為了業(yè)務的數(shù)字化存在形式。
把業(yè)務和數(shù)據(jù)的關系用一個自然的現(xiàn)象來做解讀。左邊是一個三棱鏡，右邊是一個倒三棱鏡。業(yè)務就是一束自然光，企業(yè)通過組織結(jié)構(gòu)的設計，通過職能業(yè)務系統(tǒng)的構(gòu)建，把一個實體業(yè)務本身分解成了財務、物流、設備、人力、風控等不同的職能體系，這樣便于企業(yè)去管理。但同時也產(chǎn)生了一些數(shù)據(jù)孤島，不同的口徑，數(shù)據(jù)的結(jié)果是不一樣的。在過去這是沒有問題的，因為過去企業(yè)內(nèi)部要更好地去協(xié)同，各自管一片。但今天，當企業(yè)面臨更大、更快速的市場競爭的時候，企業(yè)希望把自己變成一個產(chǎn)品。企業(yè)自身就是一個產(chǎn)品，面向客戶快速提供業(yè)務能力，為客戶提供高價值的服務，做到全局優(yōu)化，這是每個企業(yè)所希望具備的能力。但是現(xiàn)在這些數(shù)據(jù)孤島帶來了困擾。左邊這個三棱鏡實際上是一切業(yè)務數(shù)據(jù)化的過程，但現(xiàn)在企業(yè)更希望構(gòu)建的能力是如何從這些分散的、割裂的數(shù)據(jù)孤島里，還原出最真實、最全貌的業(yè)務，從而用這些數(shù)據(jù)給我的業(yè)務做指導，也就是我們講數(shù)據(jù)融合，一切數(shù)據(jù)業(yè)務化。如何能去融合，這就是數(shù)據(jù)現(xiàn)在對于企業(yè)的價值。
NewVantage Partners報告指出，阻礙數(shù)據(jù)產(chǎn)生價值有四大挑戰(zhàn)。
第一、業(yè)務鴻溝。數(shù)據(jù)與技術人員不懂業(yè)務，業(yè)務人員不懂數(shù)據(jù)和智能技術，兩者之間無法形成合力；
第二、場景鴻溝。找不到高價值的業(yè)務場景，無法讓數(shù)據(jù)直接參與業(yè)務的生產(chǎn)，并且無法清晰地度量數(shù)據(jù)帶來的價值；
第三、質(zhì)量鴻溝。數(shù)據(jù)質(zhì)量差，無法保證業(yè)務的效果，傳統(tǒng)的數(shù)據(jù)治理很難以高效地解決這個問題；
第四、規(guī)模鴻溝。我們不能讓數(shù)據(jù)停留在實驗室里，停留在小的MVP里，需要讓數(shù)據(jù)真正大規(guī)模地為企業(yè)產(chǎn)生價值。
案例解析 數(shù)據(jù)驅(qū)動的企業(yè)如何產(chǎn)生業(yè)務價值
以全球頭部數(shù)字化企業(yè)Netflix的真實案例來看，一家傳統(tǒng)企業(yè)是如何解決這四大挑戰(zhàn)并成功進行數(shù)字化轉(zhuǎn)型。
Netflix構(gòu)建了四大體系，首先是Netflix的DataBP機制，就是它的數(shù)據(jù)人員是深入到業(yè)務團隊里面去幫助業(yè)務產(chǎn)生數(shù)據(jù)價值的；第二、解決場景鴻溝，他們所應用的是價值出發(fā)，探索共創(chuàng)的方式；第三、質(zhì)量鴻溝。如何解決數(shù)據(jù)質(zhì)量問題，Netflix采用的是全鏈路協(xié)同的機制，全民接數(shù)據(jù)生產(chǎn)和消費者，打通整個數(shù)據(jù)的生產(chǎn)鏈路，在過程當中解決數(shù)據(jù)質(zhì)量問題；第四、規(guī)模鴻溝。Netflix打造了全企業(yè)唯一的、統(tǒng)一的數(shù)據(jù)資產(chǎn)生產(chǎn)利用的平臺，也就是我們所講的數(shù)據(jù)中臺。
我們快速地來看一下，它這四個方面是如何做到的。
首先，Netflix整個企業(yè)所有的用戶都在使用數(shù)據(jù)。在現(xiàn)在的情況來看，它的每一個業(yè)務板塊都有對應的數(shù)據(jù)團隊，總部的數(shù)據(jù)團隊跟所有在業(yè)務里的數(shù)據(jù)團隊緊密地協(xié)作和融合。數(shù)據(jù)人員以數(shù)據(jù)合作伙伴的方式，深入地參與到業(yè)務當中，這種情況下業(yè)務跟數(shù)據(jù)人員能夠無縫結(jié)合，充分地利用數(shù)據(jù)的技術，去解決數(shù)據(jù)問題，提升業(yè)務的效率。
第二，如何解決場景鴻溝？Netflix并不是一開始做非常大的規(guī)劃，然后先把能力建好，再去找場景去解決問題。他們是以場景、業(yè)務價值為核心，由于它的數(shù)據(jù)人員跟業(yè)務人員緊密地協(xié)同，所以數(shù)據(jù)人員能實時地發(fā)現(xiàn)業(yè)務的痛點和問題，兩者去共創(chuàng)，形成真正的數(shù)據(jù)需求，而不是一些由于業(yè)務人員不了解技術，最后自己想出來的一些偽需求，無法實現(xiàn)的需求。所以Netflix在所有的業(yè)務領域，都充分地利用了數(shù)據(jù)，從數(shù)據(jù)驅(qū)動的個性化體驗，每一個觀眾所看到的Netflix首頁都是不一樣的。到數(shù)據(jù)驅(qū)動的產(chǎn)品設計，到它整個企業(yè)資產(chǎn)的優(yōu)化，內(nèi)容的制作，產(chǎn)品營銷的預測，整個企業(yè)的運營優(yōu)化，這是一家完全數(shù)據(jù)驅(qū)動的企業(yè)。但是你可能無法想象，在20年前Netflix還是一個租光盤的實體店鋪，所以Netflix解決場景鴻溝用的是場景驅(qū)動，以業(yè)務價值為核心。
Netflix是如何解決數(shù)據(jù)質(zhì)量的問題？它并沒有去構(gòu)建我們所講的完整的、標準化的，這種非常重的數(shù)據(jù)治理體系，或者說這一部分并不是它最核心和投入最大的。它把數(shù)據(jù)的整個生產(chǎn)看作一個完整的鏈路，在鏈路生產(chǎn)利用的過程中，每一個環(huán)節(jié)都有數(shù)據(jù)質(zhì)量把控的關鍵動作，所以它已經(jīng)把數(shù)據(jù)治理融合到了數(shù)據(jù)生產(chǎn)和利用的過程當中。這里面很重要的一個能力是如何建立全鏈路的數(shù)據(jù)協(xié)同生產(chǎn)，我們舉個例子。
如果財務人員能實時看到企業(yè)里所有利用財務數(shù)據(jù)，設計財務KPI的這些數(shù)據(jù)工作的話，那么當他發(fā)現(xiàn)這里面的口徑、算法、標準不一致的時候，他就能去協(xié)助解決。全局的協(xié)同，就能從根本上解決數(shù)據(jù)生產(chǎn)二次加工質(zhì)量的問題。但這里面有一個出發(fā)點，Netflix非常提倡數(shù)據(jù)可視化。
Netflix里面有一句話是拿到數(shù)據(jù)先解讀，讓所有人對齊認知，所以這是協(xié)同的基礎。這是第三個挑戰(zhàn)解決的方法，用全鏈路協(xié)同去解決數(shù)據(jù)質(zhì)量的問題。第四，Netflix打造了企業(yè)唯一的，也是統(tǒng)一的一站式數(shù)據(jù)中臺。所有的數(shù)據(jù)用戶不僅僅是數(shù)據(jù)開發(fā)、數(shù)據(jù)分析師這些，包括企業(yè)的高層。用數(shù)據(jù)看報表、開發(fā)數(shù)據(jù)的所有人員，都在這一個平臺上進行數(shù)據(jù)的生產(chǎn)和利用協(xié)同，所以它是面向全部數(shù)據(jù)用戶的。第二，它在整體的企業(yè)唯一數(shù)據(jù)中臺里面，構(gòu)建了企業(yè)級的數(shù)據(jù)鏈路全景圖。
Netflix建立了全企業(yè)唯一的，也是統(tǒng)一的企業(yè)級數(shù)據(jù)門戶，這個門戶是非常有意義的。想用數(shù)據(jù)的人去門戶上找數(shù)據(jù)，開發(fā)了數(shù)據(jù)API的人，把自己的API發(fā)布在門戶上，這樣的話別人可以去調(diào)用，這里面有非常嚴格的數(shù)據(jù)安全，數(shù)據(jù)權限管理的方式。這樣的話，就全鏈路協(xié)同地打通了企業(yè)的數(shù)據(jù)生產(chǎn)利用，最大范圍內(nèi)規(guī)避了數(shù)據(jù)不一致，口徑對不齊的這種問題。第四，企業(yè)的數(shù)據(jù)中臺是完全構(gòu)建在云上的，是完全現(xiàn)代化的數(shù)據(jù)技術棧。
Netflix應對這四大挑戰(zhàn)，它的四種辦法：
第一，業(yè)務與技術深度融合，采用DataBP的這種制度。
第二，充分以價值為驅(qū)動，以場景為核心，去打造數(shù)據(jù)產(chǎn)品。
第三，構(gòu)建全鏈路的協(xié)同體系，以數(shù)據(jù)可視化為基礎，去解決數(shù)據(jù)質(zhì)量問題。
第四，構(gòu)建企業(yè)唯一的一站式數(shù)據(jù)生產(chǎn)、開發(fā)、利用平臺，也就是數(shù)據(jù)中臺。
數(shù)據(jù)創(chuàng)造價值的底層邏輯
企業(yè)碰到的數(shù)據(jù)問題，我們都可以用七大浪費來作為一個解讀，這七大浪費是現(xiàn)在企業(yè)數(shù)據(jù)問題產(chǎn)生的重要根因。
首先是過度生產(chǎn)，重復的報表，數(shù)據(jù)產(chǎn)品的功能重疊，很多用戶不需要的功能。這些過度的生產(chǎn)，導致了當用戶在需要數(shù)據(jù)的時候，面對的是多個重復的這些功能或者報表，或者數(shù)據(jù)集，他無法知道從哪里去選擇。所以帶來了很多時候他選擇錯誤，產(chǎn)生了更加錯誤的數(shù)據(jù)二次加工品，企業(yè)有非常多的數(shù)據(jù)垃圾。數(shù)據(jù)這個領域叫Garbage in，Garbage out。如果不能夠獲取正確的數(shù)據(jù)，那么產(chǎn)生的數(shù)據(jù)產(chǎn)品一定是錯誤的。
第二是庫存浪費，做了非常多的提前生產(chǎn)放在那里，用戶并沒有使用。最典型的例子是業(yè)務部門提出報表的需求，技術部門在排隊生產(chǎn)。等技術部門終于把這個報表開發(fā)出來以后，業(yè)務部門已經(jīng)不需要了，那這個報表就存在了數(shù)據(jù)庫里，可能就以后再也沒有人用，也沒有人想起。
第三是運輸?shù)睦速M，過多的數(shù)據(jù)集成動作，不需要的數(shù)據(jù)牽引，這些都是浪費。資源的浪費，算力的浪費是一方面。更多的是當企業(yè)再想用到真實、正確數(shù)據(jù)的時候，他面對的是一堆分不清楚，混亂的數(shù)據(jù)集、數(shù)據(jù)產(chǎn)品，就帶來了更多的誤解和不一致的地方。
第四是動作浪費，這個指的是數(shù)據(jù)工程師，數(shù)據(jù)分析師在具體做數(shù)據(jù)生產(chǎn)和數(shù)據(jù)利用時候的一些不夠高效的技術動作。比如說不需要的數(shù)據(jù)存儲，過多的數(shù)據(jù)轉(zhuǎn)換，多層的數(shù)據(jù)抽象。
第五是加工的浪費，過多的數(shù)據(jù)分析，過多的特征值提取，不需要的訓練數(shù)據(jù)。
第六是不良的浪費，產(chǎn)生了很多質(zhì)量不高的，數(shù)據(jù)不準確的，用戶體驗不好的數(shù)據(jù)產(chǎn)品，它也在數(shù)據(jù)倉庫里，也在我們的數(shù)據(jù)湖里。這些沒有價值的不良產(chǎn)品，它也依然會給我們的數(shù)據(jù)使用帶來眾多的困擾。
第七是等待的浪費，數(shù)據(jù)構(gòu)建的時候，過早地把數(shù)據(jù)收集進來，等待其他的數(shù)據(jù)進來做生產(chǎn)，這也是一種浪費。
在我們追求極致的效率的時候，這七大浪費不僅僅降低了我們數(shù)據(jù)生產(chǎn)利用的效率，同時更多的是帶來了業(yè)務理解上，數(shù)據(jù)口徑上的不一致。
數(shù)據(jù)生產(chǎn)的七大浪費產(chǎn)生的根因在于，現(xiàn)階段數(shù)據(jù)質(zhì)量問題的本質(zhì)是全民化數(shù)據(jù)需求和有限/碎片的數(shù)據(jù)生產(chǎn)力的矛盾。十幾年前，實際上數(shù)據(jù)質(zhì)量問題不突出。因為所有的數(shù)據(jù)存儲、開發(fā)、利用都是由IT部門統(tǒng)一去完成的，業(yè)務部門不需要去碰數(shù)據(jù)，業(yè)務部門拿到報表看報表，有問題找IT就夠了，這種情況下，數(shù)據(jù)的開發(fā)利用過程、標準以及數(shù)據(jù)集、資源全部掌握在IT手里，統(tǒng)一標準化，這就問題很少。隨著企業(yè)數(shù)字化轉(zhuǎn)型的深入，眾多企業(yè)已經(jīng)成為了數(shù)據(jù)就是業(yè)務，業(yè)務就是數(shù)據(jù)的企業(yè)，這種情況下IT中心化的數(shù)據(jù)生產(chǎn)就不再能夠滿足這樣分散的，日益增長的，無窮的數(shù)據(jù)需求。最后業(yè)務部門自己去利用力所能及的方式，構(gòu)建了很多數(shù)據(jù)應用，包括用表格線下去做計算。但是這樣一來我們就會發(fā)現(xiàn)，原來中心化的數(shù)據(jù)生產(chǎn)現(xiàn)在變成了一個分散式的、割裂式的，甚至很多企業(yè)里面業(yè)務部門都有自己的數(shù)據(jù)平臺，數(shù)據(jù)存儲，這必然會產(chǎn)生前面所講到的七大浪費，帶來的是大家的數(shù)據(jù)質(zhì)量比較差，無法去為業(yè)務產(chǎn)生高價值的產(chǎn)品和洞見，我們根本上要解決的是全民數(shù)據(jù)需求與有限的碎片化的數(shù)據(jù)生產(chǎn)力的矛盾。
精益數(shù)據(jù)方法論：
企業(yè)數(shù)據(jù)價值創(chuàng)造的驅(qū)動力
怎么樣能夠去幫助企業(yè)構(gòu)建這種統(tǒng)一的、標準化的、全民自服務的，從數(shù)據(jù)資源到業(yè)務價值的體系？在過去近10年的探索和實踐過程當中，我總結(jié)了一套方法論，一套實踐方法叫“精益數(shù)據(jù)方法”，該方法來自于精益思想。精益思想在日本工業(yè)革命時期產(chǎn)生的一大思想瑰寶，它提出了五大要素?；谟脩魞r值為核心，將業(yè)務梳理成價值流，讓這個價值流流動起來，更加高速地自動運轉(zhuǎn)，過程中不再是以生產(chǎn)去定銷售，而是以用戶的需求來拉動生產(chǎn)，減少浪費。最后在自動的價值流不斷流動的過程中，快速迭代，持續(xù)完善。
精益數(shù)據(jù)方法論總結(jié)成四大要素：
1、數(shù)據(jù)一定要服務于客戶價值，服務于業(yè)務價值。數(shù)據(jù)的生產(chǎn)利用本身不是目的，是手段。數(shù)據(jù)質(zhì)量也不是目的，也是手段。在未來，隨著所有企業(yè)的業(yè)務全變成數(shù)據(jù)化以后，數(shù)據(jù)會時刻地發(fā)生變化，包括數(shù)據(jù)的類型。
2、要構(gòu)建數(shù)據(jù)價值流，從我們的原數(shù)據(jù)到最后整個數(shù)據(jù)產(chǎn)品和報表，到用戶之間要有一條鏈路構(gòu)建出來，并且這個鏈路要通過DataOps數(shù)字化的方式，讓它更快地流動起來，自動化；
3、消除浪費，按需生產(chǎn)。把原來前面提到的七大數(shù)據(jù)生產(chǎn)的浪費盡可能地全部消除掉，這樣的話能夠提升數(shù)據(jù)生產(chǎn)的效率，并且提升用戶滿意度；
4、不建議做這種無死角、全方位、深度的這種大而全的，規(guī)劃完了以后再用幾年的時間去落地的方式。而建議用精益的方法，敏捷的思想持續(xù)迭代，找到亮點場景快速啟動，小步快跑，快速試錯。
精益數(shù)據(jù)方法論包括三大部分內(nèi)容：
1、精益數(shù)據(jù)宣言，就是精益數(shù)據(jù)價值觀和精益數(shù)據(jù)原則，它指明了企業(yè)做數(shù)字化轉(zhuǎn)型過程當中，利用數(shù)據(jù)的一些底層的價值觀和實施原則，這樣讓所有人能夠達成一致，對齊思想；
2、如何能走到精益數(shù)字化轉(zhuǎn)型的這樣一套方法，我們把它分為三個步驟。左邊是第一步，先找到業(yè)務價值的場景，業(yè)務的痛點。在找到亮點場景速盈的項目的同時，我們要探索發(fā)現(xiàn)所有的場景，要排出優(yōu)先級，快速地進入到優(yōu)先級最高的速盈場景MVP的構(gòu)建。在這個過程當中，我們分兩層，上面一層是數(shù)據(jù)產(chǎn)品的構(gòu)建，下面一層是數(shù)據(jù)平臺與數(shù)據(jù)能力的構(gòu)建，當然還有配套的組織體系這樣一些保障。當速盈產(chǎn)品上線以后，就持續(xù)進入運營優(yōu)化迭代的過程，這樣三步走。找到、探索、場景、識別、高優(yōu)先級、速盈產(chǎn)品、快速構(gòu)建MVP上線。
3、持續(xù)運營打造數(shù)據(jù)中臺，讓企業(yè)能夠真正建立在數(shù)據(jù)驅(qū)動的基礎之上。
精益數(shù)據(jù)治理有六大新范式：場景化、智能化、探索式、規(guī)劃式。精益數(shù)據(jù)協(xié)同尤其重要，數(shù)據(jù)中臺能為業(yè)務人員提供數(shù)據(jù)產(chǎn)品，讓業(yè)務人員具備自服務的數(shù)據(jù)能力。同時，數(shù)據(jù)中臺又是一個全鏈路拉通生產(chǎn)，數(shù)據(jù)協(xié)同的平臺，從數(shù)據(jù)門戶進來，開發(fā)人員能夠在里面找到他所需要的數(shù)據(jù)集，數(shù)據(jù)分析師能夠在里面知道業(yè)務的需求，數(shù)據(jù)產(chǎn)品經(jīng)理融合所有的這些角色，端到端的，全生命周期的去管理數(shù)據(jù)產(chǎn)品。
所有的這一切都需要一個開始，從哪里找到場景，在哪里去跟業(yè)務對成一致，認可這些場景并去實施。精益數(shù)據(jù)方法論提供實施參考，也是行業(yè)首創(chuàng)的數(shù)字化劇本殺，包括轉(zhuǎn)型方法和構(gòu)建數(shù)據(jù)驅(qū)動企業(yè)的六大能力等要點，以幫助企業(yè)對齊思想，探索場景，找到切入點，快速啟動。據(jù)悉，由史凱撰寫的《精益數(shù)據(jù)方法論-數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型》，即將在11月底出版上市。融合其多年行業(yè)實踐經(jīng)驗，通過十大篇章，共計30萬字左右，覆蓋方法論、實際案例、實操指南等內(nèi)容，值得期待。
