日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

数据中台交付标准化参考框架

發(fā)布時(shí)間:2023/12/20 编程问答 23 豆豆
生活随笔 收集整理的這篇文章主要介紹了 数据中台交付标准化参考框架 小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

導(dǎo)讀:

數(shù)據(jù)中臺(tái)是業(yè)務(wù)與技術(shù)的結(jié)合點(diǎn),其基于產(chǎn)品化的運(yùn)營思路,跑通數(shù)據(jù)流轉(zhuǎn)之后,服務(wù)于業(yè)務(wù)前臺(tái),企業(yè)基于對數(shù)據(jù)的洞察優(yōu)化業(yè)務(wù)方向,并通過反饋回來的業(yè)務(wù)數(shù)據(jù)再次輸入數(shù)據(jù)中臺(tái),持續(xù)提升中臺(tái)使用價(jià)值,實(shí)現(xiàn)數(shù)據(jù)和業(yè)務(wù)不斷的正向循環(huán)和相互促進(jìn)。數(shù)據(jù)中臺(tái)需要不斷的打磨、開發(fā)和持續(xù)運(yùn)營,在不斷實(shí)踐的過程中企業(yè)也會(huì)建立起走出經(jīng)驗(yàn)主義、走入數(shù)據(jù)管理的核心邏輯。

“不以規(guī)矩,不能成方圓”,基于對數(shù)據(jù)中臺(tái)交付技術(shù)服務(wù)的挑戰(zhàn)分析和解決思路,阿里云提出了“1+3+3+1“的交付標(biāo)準(zhǔn)參考框架,如圖3所示。1個(gè)目標(biāo),即以業(yè)務(wù)價(jià)值為導(dǎo)向,實(shí)現(xiàn)數(shù)據(jù)中臺(tái)技術(shù)服務(wù)的標(biāo)準(zhǔn)化、在線化、規(guī)模化交付;3個(gè)內(nèi)容,即數(shù)據(jù)中臺(tái)技術(shù)服務(wù)包含數(shù)據(jù)咨詢規(guī)劃服務(wù)、數(shù)據(jù)資產(chǎn)建設(shè)服務(wù)、數(shù)據(jù)應(yīng)用建設(shè)服務(wù);3個(gè)能力支撐,即交付標(biāo)準(zhǔn)流程、交付文檔集、交付工具集;1個(gè)平臺(tái),即數(shù)字化工作臺(tái),數(shù)據(jù)中臺(tái)技術(shù)服務(wù)團(tuán)隊(duì)和政企客戶通過數(shù)字化工作臺(tái)完成數(shù)據(jù)中臺(tái)項(xiàng)目交付。

交付流程、交付文檔集、交付工具集是三位一體的能力支撐體系。基于交付流程動(dòng)作及產(chǎn)出,沉淀交付技術(shù)資產(chǎn),包含交付物、過程產(chǎn)出物、項(xiàng)目評(píng)審意見、階段性匯報(bào)總結(jié)等文檔;通過對多個(gè)項(xiàng)目文檔的提煉抽象脫敏等手段,形成通用解決方案和行業(yè)解決方案;結(jié)合數(shù)據(jù)資產(chǎn)目錄劃分方法,進(jìn)行文檔集的資產(chǎn)目錄構(gòu)建,一方面做內(nèi)部參考借鑒,另一方面為交付工具打造提供輸入;交付工具集,基于通用解決方案和基礎(chǔ)產(chǎn)品開放能力,圍繞具體交付實(shí)施場景而構(gòu)建,能有效降低數(shù)據(jù)中臺(tái)交付門檻,為交付動(dòng)作執(zhí)行提供武器彈藥支持,同時(shí)倒逼交付文檔集的不斷迭代更新。交付技術(shù)服務(wù)團(tuán)隊(duì)包含業(yè)務(wù)架構(gòu)師、技術(shù)架構(gòu)師、數(shù)據(jù)產(chǎn)品經(jīng)理及實(shí)施人員等,與政企客戶服務(wù)對象一起,基于數(shù)字化工作臺(tái)進(jìn)行數(shù)據(jù)中臺(tái)項(xiàng)目在線化交付。下面小節(jié)將對交付流程、交付文檔集、交付工具集、交付技術(shù)服務(wù)團(tuán)隊(duì)和數(shù)字化工作臺(tái)分別進(jìn)行介紹說明。

交付流程動(dòng)作

流程是做事的規(guī)范和順序,是提升工作效率的重要保障。結(jié)合客戶項(xiàng)目全生命周期及交付團(tuán)隊(duì)參與度,將數(shù)據(jù)中臺(tái)交付分為交付前、交付中和交付后三個(gè)階段和六個(gè)流程,如圖4所示。其中,交付前階段包括交付前置,交付中階段包含需求調(diào)研、方案設(shè)計(jì)、開發(fā)實(shí)施、試運(yùn)行,交付后階段包含上線維保。通過標(biāo)準(zhǔn)化的交付流程,針對不同的客戶及需求,提供數(shù)據(jù)咨詢規(guī)劃服務(wù)、數(shù)據(jù)資產(chǎn)建設(shè)服務(wù)、數(shù)據(jù)應(yīng)用建設(shè)服務(wù)等差異化服務(wù)。

交付文檔集

易用、易懂、易找的技術(shù)文檔資料對降低成本、構(gòu)筑交付生態(tài)體系、培訓(xùn)賦能、打造行業(yè)影響力,以及提升交付專業(yè)度和企業(yè)競爭力都有重要的價(jià)值。在交付技術(shù)服務(wù)的各個(gè)階段,隨著交付任務(wù)階段性完成,技術(shù)資產(chǎn)也隨之在數(shù)字化工作臺(tái)上逐步沉淀下來,經(jīng)過脫敏提煉抽象等,按照通用數(shù)據(jù)資源目錄劃分方法,結(jié)合文檔打標(biāo)簽等,進(jìn)而構(gòu)建起交付技術(shù)知識(shí)庫,形成標(biāo)準(zhǔn)化的數(shù)據(jù)中臺(tái)交付文檔集,為高質(zhì)量完成各項(xiàng)交付任務(wù)提供文檔支撐,數(shù)據(jù)中臺(tái)交付各環(huán)節(jié)的交付文檔如圖5所示。

交付工具集

“工欲善其事,必先利其器”,工匠在做工前打磨好工具,操作起來就能得心應(yīng)手,達(dá)到事半功倍的效果。交付工具一方面輔助提升交付效率,另一方面降低數(shù)據(jù)中臺(tái)交付門檻,讓生態(tài)伙伴使用工具也能做交付。基于數(shù)據(jù)中臺(tái)交付的各個(gè)階段的交付質(zhì)量要求,抽象交付文檔中的共性內(nèi)容,采用產(chǎn)品化思維進(jìn)行更高維度的標(biāo)準(zhǔn)化構(gòu)建,形成標(biāo)準(zhǔn)化的數(shù)據(jù)中臺(tái)交付工具集,如數(shù)據(jù)盤點(diǎn)工具、數(shù)據(jù)集成工具、數(shù)據(jù)校驗(yàn)工具、代碼掃描工具等。交付工具集支撐交付流程高效率高質(zhì)量完成,同時(shí)有效降低數(shù)據(jù)中臺(tái)生態(tài)交付門檻,為規(guī)模化技術(shù)服務(wù)提供強(qiáng)大的自動(dòng)化技術(shù)手段。數(shù)據(jù)中臺(tái)交付各環(huán)節(jié)的交付工具如圖6所示,工具能力說明如下。

1)數(shù)據(jù)盤點(diǎn)工具

數(shù)據(jù)盤點(diǎn)工具對需要納入到數(shù)據(jù)中臺(tái)的數(shù)據(jù)進(jìn)行盤點(diǎn)、分類,結(jié)合業(yè)務(wù)過程梳理,為 數(shù)據(jù)架構(gòu)設(shè)計(jì)及數(shù)據(jù)建模提供輸入;可支持 MySQL、Oracle、DB2、SqlServer、 HANA、MongoDB、PostgreSQL 等數(shù)據(jù)庫,支持插件式擴(kuò)展;配置數(shù)據(jù)源后,可 進(jìn)行一鍵盤點(diǎn),輸出資源目錄表級(jí)數(shù)據(jù)字典,并提供智能數(shù)據(jù)采集建議。

2)數(shù)據(jù)集成工具

數(shù)據(jù)集成工具基于基礎(chǔ)產(chǎn)品開放API能力,進(jìn)行二次封裝,融入個(gè)性化功能和體驗(yàn)需求,提供面向批量數(shù)據(jù)采集場景、使用便捷的工具;提供可視化數(shù)據(jù)采集規(guī)則配置,如表命名規(guī)范、任務(wù)命名規(guī)范等,與數(shù)據(jù)盤點(diǎn)提供的智能數(shù)據(jù)采集建議無縫結(jié)合,自動(dòng)化獲取數(shù)據(jù)采集計(jì)劃清單,按照采集規(guī)則自動(dòng)補(bǔ)齊數(shù)據(jù)集成信息,減少人工成本。

3)數(shù)據(jù)探查工具

數(shù)據(jù)探查工具基于業(yè)務(wù)需求分析和數(shù)據(jù)應(yīng)用設(shè)計(jì),通過對數(shù)據(jù)及其質(zhì)量進(jìn)行初步探查,確保需求可落地性及實(shí)施效果;基于質(zhì)量探查需求和自定義業(yè)務(wù)規(guī)則,進(jìn)行數(shù)據(jù)核查和驗(yàn)證,判斷數(shù)據(jù)質(zhì)量與業(yè)務(wù)需求匹配度;可基于默認(rèn)規(guī)則或自定義規(guī)則進(jìn)行數(shù)據(jù)探查,輸出數(shù)據(jù)探查報(bào)告和數(shù)據(jù)質(zhì)量報(bào)告。

4)數(shù)據(jù)建模工具

數(shù)據(jù)建模工具基于行業(yè)級(jí)數(shù)據(jù)標(biāo)準(zhǔn)及標(biāo)準(zhǔn)數(shù)據(jù)模型進(jìn)行標(biāo)準(zhǔn)化規(guī)范可視化的數(shù)據(jù)模型構(gòu)建工作,提升數(shù)據(jù)模型設(shè)計(jì)的質(zhì)量和效率;可將數(shù)據(jù)庫元數(shù)據(jù)、DDL、數(shù)據(jù)模型文檔等多種方式導(dǎo)入逆向建模從而快速引入建模素材,并且支持?jǐn)?shù)據(jù)模型的DDL,文檔方式導(dǎo)出及數(shù)據(jù)平臺(tái)對接直接轉(zhuǎn)化成業(yè)務(wù)系統(tǒng)物理模型生產(chǎn)力,保證了設(shè)計(jì)開發(fā)的一致性,提升數(shù)據(jù)類項(xiàng)目交付質(zhì)量和效率。

5)數(shù)據(jù)校驗(yàn)工具

數(shù)據(jù)校驗(yàn)工具對數(shù)倉ODS層數(shù)據(jù)與源數(shù)據(jù)一致性需求、ADS層寬表指標(biāo)準(zhǔn)確性需求等,通過數(shù)據(jù)量校驗(yàn)、指標(biāo)校驗(yàn)等方式確保數(shù)據(jù)在采集、設(shè)計(jì)、建模、開發(fā)過程一致,保障數(shù)據(jù)與指標(biāo)一致性和準(zhǔn)確性。

6)數(shù)據(jù)回刷工具

數(shù)據(jù)回刷工具由于數(shù)據(jù)模型設(shè)計(jì)方法的差異性,上游業(yè)務(wù)系統(tǒng)數(shù)據(jù)結(jié)構(gòu)調(diào)整或數(shù)據(jù)口徑變更時(shí),需對數(shù)據(jù)表的歷史分區(qū)數(shù)據(jù)進(jìn)行回刷;ODS層回刷支持笛卡爾積、動(dòng)態(tài)分區(qū)等方式,CDM層與ADS層支持多周期合并、行列級(jí)回刷等方式。

7)代碼掃描工具

代碼掃描工具基于代碼質(zhì)量規(guī)則,對定制化開發(fā)的代碼質(zhì)量進(jìn)行檢查,發(fā)現(xiàn)代碼編寫不規(guī)范、效率低等質(zhì)量問題,提升代碼檢查效率并提供優(yōu)化建議;支持全量代碼掃描、單條SQL調(diào)試、按任務(wù)編號(hào)掃描和按代碼空間掃描等。

基于上述的系列交付工具,交付過程變得更清晰和簡單,交付前、交付中、交付后的流程和配套工具的銜接更合理和順暢。

交付服務(wù)團(tuán)隊(duì)

一個(gè)好的工程項(xiàng)目必須有一套完整的組織保障機(jī)制。數(shù)據(jù)中臺(tái)以業(yè)務(wù)價(jià)值為導(dǎo)向,其交付專業(yè)要求高、過程管控復(fù)雜、交付生態(tài)協(xié)同難,要高質(zhì)量建設(shè)數(shù)據(jù)中臺(tái),除了交付流程、交付文檔集、交付工具集之外,也需要強(qiáng)有力的組織保障,確保角色完整、分工明確、銜接順暢、各司其職、各盡其責(zé)。

站在數(shù)據(jù)中臺(tái)建設(shè)全生命周期視角,除了客戶和生態(tài)伙伴之外,數(shù)據(jù)中臺(tái)企業(yè)服務(wù)角色構(gòu)成主要包括SA、CBM、PMO、CSM、BA、TM、PD、QA和TAM,項(xiàng)目不同階段由不同的團(tuán)隊(duì)來負(fù)責(zé),每個(gè)角色在各個(gè)不同階段及流程中承擔(dān)的職責(zé)如圖7所示,RACI責(zé)任分配矩陣如表1所示。

其中,SA解決方案架構(gòu)師負(fù)責(zé)售前客戶需求調(diào)研與方案設(shè)計(jì),CBM客戶經(jīng)理負(fù)責(zé)對售前商務(wù)風(fēng)險(xiǎn)等進(jìn)行識(shí)別判斷,PMO負(fù)責(zé)對項(xiàng)目可交付性進(jìn)行評(píng)審,CSM對項(xiàng)目啟動(dòng)規(guī)劃及最終項(xiàng)目驗(yàn)收負(fù)責(zé),BA對業(yè)務(wù)需求及業(yè)務(wù)架構(gòu)設(shè)計(jì)負(fù)責(zé),TM對數(shù)據(jù)和技術(shù)架構(gòu)及其落地方案負(fù)責(zé),PD對數(shù)據(jù)應(yīng)用及數(shù)據(jù)產(chǎn)品設(shè)計(jì)負(fù)責(zé),QA對測試方案及落地負(fù)責(zé),TAM對售后運(yùn)維負(fù)責(zé),各角色在CSM、BA、TM的統(tǒng)籌下進(jìn)行協(xié)作,共同對項(xiàng)目交付負(fù)責(zé)。

數(shù)據(jù)中臺(tái)建設(shè)需要多個(gè)團(tuán)隊(duì)和角色協(xié)作完成,涉及交付前階段、交付中階段、交付后階段,每個(gè)交付階段涉及客戶、阿里云、生態(tài)伙伴等,要確保不同的角色之間分工明確、各司其職、銜接順暢,就需要明確不同的角色職責(zé)邊界和銜接關(guān)系,這也是交付過程管理中的重要質(zhì)量把控原則。

數(shù)字化工作臺(tái)

數(shù)字化轉(zhuǎn)型過程中的大型項(xiàng)目,開發(fā)團(tuán)隊(duì)動(dòng)輒數(shù)十人至幾百人,來自各個(gè)不同的組織。溝通不暢、信息分散、嚴(yán)重依賴個(gè)人能力的情況時(shí)有發(fā)生,就好像盲人摸象,項(xiàng)目的透明度低下,嚴(yán)重阻礙項(xiàng)目走向成功。過去的項(xiàng)目管理以及協(xié)同的方式已經(jīng)不再適合今天大型全要素的數(shù)字化轉(zhuǎn)型的過程,急需要全新的數(shù)字化轉(zhuǎn)型交付和服務(wù)的方法論以及與之配套的工具和平臺(tái)。2021年10月19日,飛天技術(shù)服務(wù)平臺(tái)-數(shù)字化工作臺(tái)在杭州云棲大會(huì)上正式亮相,整體提出了組織在線、成員在線、業(yè)務(wù)在線及項(xiàng)目在線的全量在線的企業(yè)服務(wù)模式,首次透明企業(yè)服務(wù)的全過程,為不同角色提供社會(huì)化的協(xié)作、數(shù)據(jù)化的管理、智能化的管理能力,實(shí)現(xiàn)項(xiàng)目在線、精益管理、優(yōu)秀履約的目標(biāo)。客戶、數(shù)據(jù)中臺(tái)技術(shù)服務(wù)服務(wù)團(tuán)隊(duì)在一體化的數(shù)字化工作臺(tái)上完成服務(wù)履約;客戶隨時(shí)可查看了解項(xiàng)目過程,同時(shí)會(huì)基于在線IM工具完成服務(wù)及溝通互動(dòng);伙伴從人、財(cái)、事、物四個(gè)方面全面與阿里巴巴協(xié)同,共同為客戶提供高質(zhì)量的云創(chuàng)新數(shù)字服務(wù)。

數(shù)字化工作臺(tái)功能結(jié)構(gòu)示意圖,如圖8所示。管理層基于云原生架構(gòu)設(shè)計(jì)、云原生的產(chǎn)品與技術(shù)實(shí)現(xiàn),提供基礎(chǔ)的賬號(hào)管理、權(quán)限管理、產(chǎn)品管理等能力。應(yīng)用層為技術(shù)服務(wù)團(tuán)隊(duì)提供待辦消息、服務(wù)日歷、交付流程管理、交付工具管理和交付文檔管理等線上操作,為政企客戶提供待辦消息、企業(yè)信息、人員管理、項(xiàng)目管理和結(jié)算管理等線上操作。其中,標(biāo)準(zhǔn)中心為標(biāo)準(zhǔn)交付流程與動(dòng)作、交付方案、交付過程產(chǎn)出等提供能力支撐;工具中心為交付工具提供上架、下架、與交付動(dòng)作關(guān)聯(lián)等提供能力支撐;文檔中心承接標(biāo)準(zhǔn)中心的過程產(chǎn)出文檔,并提供文檔打標(biāo)、查看、搜索、下載等能力。數(shù)據(jù)層,基于應(yīng)用層產(chǎn)生的數(shù)據(jù)進(jìn)行數(shù)據(jù)資產(chǎn)構(gòu)建與管理,進(jìn)行人員、項(xiàng)目、資產(chǎn)、客戶、生態(tài)等主題庫建設(shè),為交付標(biāo)準(zhǔn)化率、交付方案復(fù)用率、項(xiàng)目質(zhì)量優(yōu)良率、交付自動(dòng)率等標(biāo)準(zhǔn)化指標(biāo)提供數(shù)據(jù)支撐。業(yè)務(wù)層,提供風(fēng)險(xiǎn)預(yù)警、知識(shí)搜索、人員畫像、客戶洞察等應(yīng)用。數(shù)字化工作臺(tái)為標(biāo)準(zhǔn)化的數(shù)據(jù)中臺(tái)交付流程、交付文檔和交付工具提供長效平穩(wěn)運(yùn)轉(zhuǎn)和持續(xù)迭代演進(jìn)提供全方位的支持和保障。

互聯(lián)互通社區(qū)

互聯(lián)互通社區(qū)-IT智庫,是互聯(lián)互通社區(qū)IT架構(gòu)、前沿技術(shù)平臺(tái)。包含科技趨勢、總體架構(gòu)、產(chǎn)業(yè)架構(gòu)、技術(shù)架構(gòu)、系統(tǒng)架構(gòu)、業(yè)務(wù)架構(gòu)等內(nèi)容,內(nèi)容簡練,皆屬干貨,合作請+微信:hulianhutongshequ.

總結(jié)

以上是生活随笔為你收集整理的数据中台交付标准化参考框架的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。