阿里巴巴云上數(shù)據(jù)中臺03——實施案例

0 評論 1774 瀏覽 1 收藏 8 分鐘

本文詳細介紹了阿里巴巴在云上數(shù)據(jù)中臺建設的第三階段實施案例,展示了數(shù)據(jù)公共層運營、元數(shù)據(jù)打通等關鍵環(huán)節(jié)的成果,引導讀者深入了解數(shù)據(jù)中臺的實際應用和效果,希望對你在數(shù)據(jù)管理和戰(zhàn)略規(guī)劃方面有所啟發(fā)。

前面我們聊了阿里構建數(shù)據(jù)中臺“三步走”項目計劃:

  1. 第一階段:完成全局架構。
  2. 第二階段:抓住關鍵業(yè)務的數(shù)據(jù)建設。
  3. 第三階段:全面鋪開,逐步推進各個登月項目的數(shù)據(jù)公共層建設。

在阿里巴巴數(shù)據(jù)公共層建設第一階段和第二階段完成之后,不僅取得了降本提效的成果,也培養(yǎng)了數(shù)據(jù)專業(yè)人才,加強了數(shù)據(jù)團隊內以及與業(yè)務團隊間的連接和信任。

所以在第三階段全面鋪開過程中,遇到的阻礙很少,相反,還得到很多支持。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

第三階段主要完成了:數(shù)據(jù)公共層運營、元數(shù)據(jù)打通、天貓數(shù)據(jù)中間層建設、數(shù)據(jù)資產(chǎn)管理平臺、基于元數(shù)據(jù)的數(shù)據(jù)建模工具、onedata體系全流程工具化。

草帽小子思考:著整個三步走項目計劃,跟打革命時,有異曲同工之處。最開始人手不足時,先制定整體作戰(zhàn)計劃;然后攻破關鍵城市;有一定影響力后,招兵買馬,全面鋪開和推進。

畢竟中臺的建設關聯(lián)到多個業(yè)務方,甚至牽動著業(yè)務方的利益。業(yè)務方會想,數(shù)據(jù)放在我這,我們自己提需求,自己開發(fā),多便捷,何必需要外人來橫插一腳。

這時數(shù)據(jù)團隊需要以專業(yè)性來征服業(yè)務方,讓業(yè)務方感受到甜頭,這樣,接下來的事情也就順理成章了。

前邊我們聊了很多建設過程和方法,那在整個計劃中,有沒有一些直觀的案例呢?

公共層建設案例:

1. 淘系數(shù)據(jù)基礎層治理項目

針對TBODS(淘寶數(shù)據(jù)基礎層)當時存在的問題進行專項治理,將TBODS簡化,并制定規(guī)范,采取措施持續(xù)維護,降低ODS數(shù)據(jù)基礎層的存儲資源和計算資源的消耗。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

2. 日志數(shù)據(jù)公共層建設項目

基于阿里巴巴數(shù)據(jù)公共層初始化建設的成功,進一步完善日志流量模型,包含攻堅無線流量交易引擎模型,以及完成流量分析產(chǎn)品的重構與支持新需求。

草帽小子思考:公司大多會先將精力放在更貼靠業(yè)務的業(yè)務數(shù)據(jù)上,而日志數(shù)據(jù)及埋點數(shù)據(jù)往往會被忽視,缺乏專人維護,數(shù)據(jù)口徑不一。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

3. 實現(xiàn)阿里巴巴數(shù)據(jù)公共層統(tǒng)一性重構

將小微金服依賴的云計算環(huán)境1上的數(shù)據(jù)遷移到公共數(shù)據(jù)層依賴的云環(huán)境2上。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

4. 聚劃算數(shù)據(jù)中間層建設項目

基于阿里巴巴數(shù)據(jù)公共層,規(guī)劃出聚劃算事業(yè)部的數(shù)據(jù)中間層,用于更標準、更快捷的服務聚劃算業(yè)務。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

5. 搜索數(shù)據(jù)中間層建設項目

建設淘系主搜索與主客戶端搜索數(shù)據(jù)中間層遷移報表。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

6. 1688數(shù)據(jù)公共層與數(shù)據(jù)應用層建設項目

基于1688的數(shù)據(jù)公共層與數(shù)據(jù)應用層登月建設,實現(xiàn)1688業(yè)務的對內對外應用。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

7. 阿里經(jīng)營關鍵數(shù)據(jù)建設項目

基于阿里巴巴數(shù)據(jù)公共層,統(tǒng)一對內、對外數(shù)據(jù)口徑,提供COO重點關注的指標。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

8. 核心運營數(shù)據(jù)與行業(yè)數(shù)據(jù)建設項目

基于阿里巴巴數(shù)據(jù)公共層,遷移云計算環(huán)境1上的核心運營報表,同時整合行業(yè)數(shù)據(jù),完成并完善服務阿里小二的行業(yè)360產(chǎn)品。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

9. 無線數(shù)據(jù)公共層建設專項

在阿里巴巴數(shù)據(jù)公共層建設第二階段二期中,應業(yè)務部門需要而追加啟動的場景化專項,旨在構建統(tǒng)一的無線數(shù)據(jù)公共層,以順應”ALL IN 無線“的大潮。

草帽小子思考:十幾個無線端應用間的數(shù)據(jù)不打通,用起來是挺難受的,各用各的,在新增一個維度限定為移動端的指標時,需要從各個明細層拉表找數(shù)。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

10. 實時數(shù)據(jù)公共層建設專項

在阿里巴巴數(shù)據(jù)公共層建設第二階段第二期中,應技術部門與業(yè)務部門的需求而追加啟動的技術探索專項,旨在構建統(tǒng)一的實時數(shù)據(jù)公共層,提升技術的同時,提升技術部門的業(yè)務體驗。

草帽小子思考:目前是零零散散用了一些實時數(shù)據(jù),主要靠四處找表、拉表,若是能夠做好實時數(shù)據(jù)的數(shù)倉建設,也能避免很大程度上的找數(shù)的煩擾。

阿里巴巴云上數(shù)據(jù)中臺03_實施案例

專欄作家

草帽小子,公眾號:一個數(shù)據(jù)人的自留地,人人都是產(chǎn)品經(jīng)理專欄作家?!洞髷?shù)據(jù)實踐之路:數(shù)據(jù)中臺+數(shù)據(jù)分析+產(chǎn)品應用》書籍作者,專注用戶畫像領域。

本文原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉載

題圖來自Unsplash,基于CC0協(xié)議。

該文觀點僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺僅提供信息存儲空間服務。

更多精彩內容,請關注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發(fā)揮!