阿里巴巴云上數(shù)據(jù)中臺(tái)03——實(shí)施案例

0 評(píng)論 1364 瀏覽 1 收藏 8 分鐘

本文詳細(xì)介紹了阿里巴巴在云上數(shù)據(jù)中臺(tái)建設(shè)的第三階段實(shí)施案例,展示了數(shù)據(jù)公共層運(yùn)營(yíng)、元數(shù)據(jù)打通等關(guān)鍵環(huán)節(jié)的成果,引導(dǎo)讀者深入了解數(shù)據(jù)中臺(tái)的實(shí)際應(yīng)用和效果,希望對(duì)你在數(shù)據(jù)管理和戰(zhàn)略規(guī)劃方面有所啟發(fā)。

前面我們聊了阿里構(gòu)建數(shù)據(jù)中臺(tái)“三步走”項(xiàng)目計(jì)劃:

  1. 第一階段:完成全局架構(gòu)。
  2. 第二階段:抓住關(guān)鍵業(yè)務(wù)的數(shù)據(jù)建設(shè)。
  3. 第三階段:全面鋪開(kāi),逐步推進(jìn)各個(gè)登月項(xiàng)目的數(shù)據(jù)公共層建設(shè)。

在阿里巴巴數(shù)據(jù)公共層建設(shè)第一階段和第二階段完成之后,不僅取得了降本提效的成果,也培養(yǎng)了數(shù)據(jù)專業(yè)人才,加強(qiáng)了數(shù)據(jù)團(tuán)隊(duì)內(nèi)以及與業(yè)務(wù)團(tuán)隊(duì)間的連接和信任。

所以在第三階段全面鋪開(kāi)過(guò)程中,遇到的阻礙很少,相反,還得到很多支持。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

第三階段主要完成了:數(shù)據(jù)公共層運(yùn)營(yíng)、元數(shù)據(jù)打通、天貓數(shù)據(jù)中間層建設(shè)、數(shù)據(jù)資產(chǎn)管理平臺(tái)、基于元數(shù)據(jù)的數(shù)據(jù)建模工具、onedata體系全流程工具化。

草帽小子思考:著整個(gè)三步走項(xiàng)目計(jì)劃,跟打革命時(shí),有異曲同工之處。最開(kāi)始人手不足時(shí),先制定整體作戰(zhàn)計(jì)劃;然后攻破關(guān)鍵城市;有一定影響力后,招兵買(mǎi)馬,全面鋪開(kāi)和推進(jìn)。

畢竟中臺(tái)的建設(shè)關(guān)聯(lián)到多個(gè)業(yè)務(wù)方,甚至牽動(dòng)著業(yè)務(wù)方的利益。業(yè)務(wù)方會(huì)想,數(shù)據(jù)放在我這,我們自己提需求,自己開(kāi)發(fā),多便捷,何必需要外人來(lái)橫插一腳。

這時(shí)數(shù)據(jù)團(tuán)隊(duì)需要以專業(yè)性來(lái)征服業(yè)務(wù)方,讓業(yè)務(wù)方感受到甜頭,這樣,接下來(lái)的事情也就順理成章了。

前邊我們聊了很多建設(shè)過(guò)程和方法,那在整個(gè)計(jì)劃中,有沒(méi)有一些直觀的案例呢?

公共層建設(shè)案例:

1. 淘系數(shù)據(jù)基礎(chǔ)層治理項(xiàng)目

針對(duì)TBODS(淘寶數(shù)據(jù)基礎(chǔ)層)當(dāng)時(shí)存在的問(wèn)題進(jìn)行專項(xiàng)治理,將TBODS簡(jiǎn)化,并制定規(guī)范,采取措施持續(xù)維護(hù),降低ODS數(shù)據(jù)基礎(chǔ)層的存儲(chǔ)資源和計(jì)算資源的消耗。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

2. 日志數(shù)據(jù)公共層建設(shè)項(xiàng)目

基于阿里巴巴數(shù)據(jù)公共層初始化建設(shè)的成功,進(jìn)一步完善日志流量模型,包含攻堅(jiān)無(wú)線流量交易引擎模型,以及完成流量分析產(chǎn)品的重構(gòu)與支持新需求。

草帽小子思考:公司大多會(huì)先將精力放在更貼靠業(yè)務(wù)的業(yè)務(wù)數(shù)據(jù)上,而日志數(shù)據(jù)及埋點(diǎn)數(shù)據(jù)往往會(huì)被忽視,缺乏專人維護(hù),數(shù)據(jù)口徑不一。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

3. 實(shí)現(xiàn)阿里巴巴數(shù)據(jù)公共層統(tǒng)一性重構(gòu)

將小微金服依賴的云計(jì)算環(huán)境1上的數(shù)據(jù)遷移到公共數(shù)據(jù)層依賴的云環(huán)境2上。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

4. 聚劃算數(shù)據(jù)中間層建設(shè)項(xiàng)目

基于阿里巴巴數(shù)據(jù)公共層,規(guī)劃出聚劃算事業(yè)部的數(shù)據(jù)中間層,用于更標(biāo)準(zhǔn)、更快捷的服務(wù)聚劃算業(yè)務(wù)。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

5. 搜索數(shù)據(jù)中間層建設(shè)項(xiàng)目

建設(shè)淘系主搜索與主客戶端搜索數(shù)據(jù)中間層遷移報(bào)表。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

6. 1688數(shù)據(jù)公共層與數(shù)據(jù)應(yīng)用層建設(shè)項(xiàng)目

基于1688的數(shù)據(jù)公共層與數(shù)據(jù)應(yīng)用層登月建設(shè),實(shí)現(xiàn)1688業(yè)務(wù)的對(duì)內(nèi)對(duì)外應(yīng)用。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

7. 阿里經(jīng)營(yíng)關(guān)鍵數(shù)據(jù)建設(shè)項(xiàng)目

基于阿里巴巴數(shù)據(jù)公共層,統(tǒng)一對(duì)內(nèi)、對(duì)外數(shù)據(jù)口徑,提供COO重點(diǎn)關(guān)注的指標(biāo)。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

8. 核心運(yùn)營(yíng)數(shù)據(jù)與行業(yè)數(shù)據(jù)建設(shè)項(xiàng)目

基于阿里巴巴數(shù)據(jù)公共層,遷移云計(jì)算環(huán)境1上的核心運(yùn)營(yíng)報(bào)表,同時(shí)整合行業(yè)數(shù)據(jù),完成并完善服務(wù)阿里小二的行業(yè)360產(chǎn)品。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

9. 無(wú)線數(shù)據(jù)公共層建設(shè)專項(xiàng)

在阿里巴巴數(shù)據(jù)公共層建設(shè)第二階段二期中,應(yīng)業(yè)務(wù)部門(mén)需要而追加啟動(dòng)的場(chǎng)景化專項(xiàng),旨在構(gòu)建統(tǒng)一的無(wú)線數(shù)據(jù)公共層,以順應(yīng)”ALL IN 無(wú)線“的大潮。

草帽小子思考:十幾個(gè)無(wú)線端應(yīng)用間的數(shù)據(jù)不打通,用起來(lái)是挺難受的,各用各的,在新增一個(gè)維度限定為移動(dòng)端的指標(biāo)時(shí),需要從各個(gè)明細(xì)層拉表找數(shù)。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

10. 實(shí)時(shí)數(shù)據(jù)公共層建設(shè)專項(xiàng)

在阿里巴巴數(shù)據(jù)公共層建設(shè)第二階段第二期中,應(yīng)技術(shù)部門(mén)與業(yè)務(wù)部門(mén)的需求而追加啟動(dòng)的技術(shù)探索專項(xiàng),旨在構(gòu)建統(tǒng)一的實(shí)時(shí)數(shù)據(jù)公共層,提升技術(shù)的同時(shí),提升技術(shù)部門(mén)的業(yè)務(wù)體驗(yàn)。

草帽小子思考:目前是零零散散用了一些實(shí)時(shí)數(shù)據(jù),主要靠四處找表、拉表,若是能夠做好實(shí)時(shí)數(shù)據(jù)的數(shù)倉(cāng)建設(shè),也能避免很大程度上的找數(shù)的煩擾。

阿里巴巴云上數(shù)據(jù)中臺(tái)03_實(shí)施案例

專欄作家

草帽小子,公眾號(hào):一個(gè)數(shù)據(jù)人的自留地,人人都是產(chǎn)品經(jīng)理專欄作家?!洞髷?shù)據(jù)實(shí)踐之路:數(shù)據(jù)中臺(tái)+數(shù)據(jù)分析+產(chǎn)品應(yīng)用》書(shū)籍作者,專注用戶畫(huà)像領(lǐng)域。

本文原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載

題圖來(lái)自Unsplash,基于CC0協(xié)議。

該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)。

更多精彩內(nèi)容,請(qǐng)關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號(hào)或下載App
評(píng)論
評(píng)論請(qǐng)登錄
  1. 目前還沒(méi)評(píng)論,等你發(fā)揮!