中臺產(chǎn)品經(jīng)理實戰(zhàn)(18):數(shù)據(jù)中臺搭建方法論集合(上)
編輯導(dǎo)語:在上一篇文章《中臺實戰(zhàn)(16):大廠數(shù)據(jù)中臺的通俗化解讀》中,本文作者已經(jīng)將數(shù)據(jù)中臺的概念為我們做了深入的剖析。接下來,作者會花兩篇文章的篇幅為大家講解數(shù)據(jù)中臺建設(shè)的完整方法論,本篇文章為上篇。
一、數(shù)據(jù)中臺預(yù)建設(shè)
看過我的新書《中臺產(chǎn)品經(jīng)理寶典》的朋友們,應(yīng)該很熟悉我在搭建中臺里梳理了一個完整的MSS建設(shè)方法論。
其中有一個重要環(huán)節(jié),稱之為業(yè)務(wù)標(biāo)準(zhǔn)化(Standard),也就是我們需要先對當(dāng)前業(yè)務(wù)有一個標(biāo)準(zhǔn)化定義,將公司內(nèi)部不同業(yè)務(wù)線的業(yè)務(wù)流程梳理并合并為一套全公司通用的SOP,在此基礎(chǔ)上去建設(shè)中臺。
這就好比我們要進(jìn)行大樓建設(shè),如果沒有一個穩(wěn)定的地基,上層建筑就無法穩(wěn)定下來,建設(shè)出的中臺也會出現(xiàn)各種需求不符合,業(yè)務(wù)線不愿對接的現(xiàn)象。
那么在數(shù)據(jù)中臺建設(shè)時也有同樣的環(huán)節(jié)要去完成,我們稱之為數(shù)據(jù)中臺預(yù)建設(shè)。
1. 數(shù)據(jù)中臺的預(yù)建設(shè)分為兩個步驟
1)標(biāo)準(zhǔn)化:完成對同一事物的統(tǒng)一描述
例如:統(tǒng)一不同事業(yè)線之間的指標(biāo)口徑,如財務(wù)指標(biāo)中A業(yè)務(wù)線使用毛利,B業(yè)務(wù)線使用稅后毛利作為業(yè)務(wù)線利潤統(tǒng)計,這里在財務(wù)角度來看就是不統(tǒng)一的,需要進(jìn)行統(tǒng)一。
2)中心化:數(shù)據(jù)權(quán)限上升至企業(yè)層面
我們知道,之所以會出現(xiàn)在公司內(nèi)部對同一事物的描述不同,其本質(zhì)原因是因為各個業(yè)務(wù)線根據(jù)自己的需要去定義了具體的業(yè)務(wù)對象與數(shù)據(jù)存儲規(guī)則。
例如我們以A,B兩條業(yè)務(wù)線的會員數(shù)據(jù)來看:
A業(yè)務(wù)線定義會員存儲表:
B業(yè)務(wù)線定義會員存儲表:
從這兩張表中我們可以直觀的發(fā)現(xiàn)如下差異:
- A業(yè)務(wù)線的會員存儲字段為4個,B業(yè)務(wù)線的會員存儲字段為5個,因此也就是會員對象定義在本質(zhì)上就有所不同;
- 在會員活躍統(tǒng)計上,A業(yè)務(wù)線關(guān)注用戶的訪問時間,因此在數(shù)據(jù)庫表中記錄了上一次訪問時間,B路線更關(guān)注用戶的消費轉(zhuǎn)化,因此記錄的是最后消費時間。此時如果作為數(shù)據(jù)中臺想要統(tǒng)計全公司會員的活躍情況,因為A,B業(yè)務(wù)線的會員活躍概念是完全不同的,這兩者數(shù)據(jù)也就無法直接使用。
2. 針對上述情況,為了避免各業(yè)務(wù)線的自主定義,在數(shù)據(jù)中臺中通常會將數(shù)據(jù)權(quán)限進(jìn)行拆分分離
1)控制權(quán)限
擁有對數(shù)據(jù)上層應(yīng)用提供數(shù)據(jù)源的權(quán)利。
2)讀寫權(quán)限
擁有數(shù)據(jù)讀取與寫入的權(quán)利。
據(jù)此我們也得到了有了數(shù)據(jù)中臺后分層數(shù)據(jù)體系下的不同權(quán)限內(nèi)容:
從圖中可以看到業(yè)務(wù)線只有數(shù)據(jù)讀/寫權(quán)限,無獨立控制權(quán)限,通過這樣的設(shè)計我們就實現(xiàn)了數(shù)據(jù)中心化,也就是由中臺具體向上層應(yīng)用提供數(shù)據(jù)。
在業(yè)務(wù)線內(nèi)部,每個業(yè)務(wù)線可以根據(jù)自己的需要去定義數(shù)據(jù)應(yīng)用,例如像上面的例子中定義自己的會員存儲字段以及會員活躍定義。但是一旦進(jìn)入上層應(yīng)用,如公司級BI報表統(tǒng)計時,由數(shù)據(jù)中臺,根據(jù)各個業(yè)務(wù)線推送至此的業(yè)務(wù)數(shù)據(jù)進(jìn)行重新計算。
從而確保各個業(yè)務(wù)線的數(shù)據(jù)是使用相同的標(biāo)準(zhǔn)、算法計算得出的相同結(jié)論。
二、全局?jǐn)?shù)據(jù)設(shè)計
完成了預(yù)建設(shè)之后,也就是我們打完了地基,接下來需要做的就是全局?jǐn)?shù)據(jù)設(shè)計。
所謂全局?jǐn)?shù)據(jù)設(shè)計,實際上就是去確定我們的數(shù)據(jù)域是什么?也就是我們的整個數(shù)據(jù)需求邊界是什么,我們需要為哪些業(yè)務(wù)對象設(shè)立指標(biāo)進(jìn)行監(jiān)控。
一般來說數(shù)據(jù)中臺的數(shù)據(jù)域管理可以分為如下兩步:
- 定義公司內(nèi)部的統(tǒng)一主題:如會員,訂單,商品等;
- 完成數(shù)據(jù)歸類:將屬于該主題的數(shù)據(jù)都?xì)w類至該數(shù)據(jù)域中。
在我們定義完數(shù)據(jù)域,如商品域、訂單域后,我們就可以在數(shù)據(jù)倉庫中定義標(biāo)準(zhǔn)的數(shù)據(jù)堆,每一個數(shù)據(jù)對存儲一個業(yè)務(wù)的數(shù)據(jù)域子集,以便將各個業(yè)務(wù)的原始數(shù)據(jù)都堆積在這里。
只有這樣建設(shè)后,我們才能實現(xiàn)上一步的為上層應(yīng)用提供數(shù)據(jù)時有原料可以重新計算。
三、方案設(shè)計
在完成前面的“基建”后,數(shù)據(jù)中臺的方案設(shè)計就可以被定義出來了,具體來說一個通用的數(shù)據(jù)中臺可以拆解為三步走建設(shè)方法:
- 業(yè)務(wù)數(shù)據(jù)集中維護(hù)管理
- 數(shù)據(jù)標(biāo)準(zhǔn)化加工(統(tǒng)一計算口徑)
- 企業(yè)級數(shù)據(jù)應(yīng)用創(chuàng)建
至此我們的上篇,數(shù)據(jù)中臺預(yù)建設(shè)篇就完成了。在下一篇文章中,我們將重點來談數(shù)據(jù)中臺的三步走方案具體設(shè)計內(nèi)容。
最后想要了解更多中臺搭建實戰(zhàn)內(nèi)容,或者想要學(xué)習(xí)掌握更多高階產(chǎn)品經(jīng)理的必備技能,可以來看看我的這本《中臺產(chǎn)品經(jīng)理寶典》一書。
#相關(guān)閱讀#
中臺實戰(zhàn)(17):支付中臺(服務(wù)中心)實戰(zhàn)
中臺實戰(zhàn)(16):大廠數(shù)據(jù)中臺的通俗化解讀
中臺實戰(zhàn)(12):中臺建設(shè)的三大誤區(qū)
中臺實戰(zhàn)(11):中臺產(chǎn)品經(jīng)理能力模型
#專欄作家#
三爺,微信公眾號:三爺茶館,人人都是產(chǎn)品經(jīng)理專欄作家,2019年年度作者?!吨信_產(chǎn)品經(jīng)理寶典》作者,原萬達(dá)高級產(chǎn)品、MBA特約講師、獨立創(chuàng)業(yè)者,現(xiàn)某支付公司產(chǎn)品線負(fù)責(zé)人,擁有多款集團(tuán)項目從零到一經(jīng)驗并帶領(lǐng)實現(xiàn)商業(yè)化布局。
本文原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載
題圖來自Unsplash,基于CC0協(xié)議。
大佬給Ginny推下,這個月天天問答的書就選這本了哈哈