数据中台建设方法论
數(shù)據(jù)中臺建設(shè)方法論體系, 需要從組織 保障 準(zhǔn)則 內(nèi)容 步驟 幾個層面考慮 ,確保 數(shù)據(jù)中臺建設(shè) 和實(shí)施能如期完成
一種戰(zhàn)略 把用數(shù)據(jù)中臺驅(qū)動業(yè)務(wù)發(fā)展定位成企業(yè)級戰(zhàn)略 全局謀劃
2項保障 通過宣導(dǎo)統(tǒng)一組織間數(shù)據(jù)認(rèn)識,通過劉車行加速 組織變革
3條目標(biāo)準(zhǔn)則 將數(shù)據(jù)的可見 可用 可運(yùn)營3個核心準(zhǔn)則始終貫穿于中臺建設(shè)的全過程 保障建設(shè)在正確軌道上
4套建設(shè)內(nèi)容 通過技術(shù)體系 數(shù)據(jù)體系 服務(wù)體系 運(yùn)營體系建設(shè) 保證中臺建設(shè)的全面性 和可持續(xù)性
5個關(guān)鍵步驟 通過理現(xiàn)狀 立架構(gòu) 建資產(chǎn) 用數(shù)據(jù) 做運(yùn)營 5個關(guān)鍵行動控制中臺關(guān)鍵節(jié)點(diǎn)質(zhì)量
數(shù)據(jù)可見 可用 可運(yùn)營
技術(shù)體系愛 數(shù)據(jù)體系 服務(wù)體系 運(yùn)營體系
理閑著慌 立架構(gòu) 建資產(chǎn) 用數(shù)據(jù) 做運(yùn)營
建設(shè)數(shù)據(jù)中臺是為支撐企業(yè)數(shù)字化 智能化 升級
數(shù)據(jù)中臺要求政哥哥企業(yè)共用一個數(shù)據(jù)技術(shù)平臺 共建 數(shù)據(jù)體系 共享數(shù)據(jù)服務(wù)能力
數(shù)據(jù)中臺的目標(biāo)是實(shí)現(xiàn)企業(yè)精英的數(shù)據(jù)化 精細(xì)化 智能化 本質(zhì)是建設(shè) 一套可持續(xù)讓企業(yè)數(shù)據(jù)用起來的機(jī)制
數(shù)據(jù)中臺實(shí)施需要組織保障 與組織對應(yīng)的是資源和責(zé)任 數(shù)據(jù)中臺由 誰 來 誰來維護(hù), 誰來精英 業(yè)務(wù)需求怎么承接, 效果怎么衡量 等問題, 需要高層對組織進(jìn)行保障
其次 中臺戰(zhàn)略 的實(shí)施需要提升全企業(yè)的數(shù)據(jù)意識, 數(shù)據(jù)文化是 數(shù)據(jù)中臺戰(zhàn)略 不可或缺的部分, 數(shù)據(jù)中臺的推進(jìn) 以來于 數(shù)據(jù)文化的建立
數(shù)據(jù)采集意識,盡可能把有價值的數(shù)據(jù)通過技術(shù)手段采集下來
數(shù)據(jù)標(biāo)準(zhǔn)化意識
之所以需要進(jìn)行數(shù)據(jù)治理, 是因為數(shù)據(jù)不標(biāo)準(zhǔn)
數(shù)據(jù)使用意識
未來數(shù)據(jù)應(yīng)用會 涉及 芳芳綿綿, 每一個業(yè)務(wù)緩解都有可能用到數(shù)據(jù)的能力, 所以所有企業(yè)員工 都要掌握數(shù)據(jù)可能的使用方式, 知道在實(shí)際業(yè)務(wù)操作過程中應(yīng)該怎么使用數(shù)據(jù), 另外數(shù)據(jù) 能夠找出人類經(jīng)驗和人腦無法找出的關(guān)聯(lián)關(guān)系 。
數(shù)據(jù)安全意識, 有些數(shù)據(jù)即使對要要業(yè)務(wù)有價值,由于侵犯隱私 或者觸犯法律等因素,不能用, 或者 換一種合法的方式使用, 企業(yè)員工需要由足夠的數(shù)據(jù)安全等級, 脫敏意識
項目標(biāo)準(zhǔn)則
數(shù)據(jù)中臺的項目標(biāo)準(zhǔn)則 是 可見 可用 可運(yùn)營
數(shù)據(jù)可見 包括: 指標(biāo)管理 元數(shù)據(jù)管理 數(shù)據(jù) 資產(chǎn)類目 數(shù)據(jù)源的可視化 數(shù)據(jù)集成的可視化 數(shù)據(jù)etl 的可視化 數(shù)據(jù)建模的可視化 數(shù)據(jù)消費(fèi)者的可視化
算法建模的可視化
數(shù)據(jù)可用 數(shù)據(jù)內(nèi)容的可用性 數(shù)據(jù)服務(wù)的可用性、數(shù)據(jù)任務(wù)的可用性、數(shù)據(jù)指標(biāo)化、數(shù)據(jù)標(biāo)簽化、資產(chǎn)的易閱讀性
數(shù)據(jù)可運(yùn)營 質(zhì)量 量化管理 價值量化管理 數(shù)據(jù)運(yùn)營角色
建設(shè)內(nèi)容是數(shù)據(jù)中臺建設(shè)的核心
可呈現(xiàn)的產(chǎn)出物, 營業(yè)室數(shù)據(jù)中臺的價值所在, 前面的戰(zhàn)略措施 保障條件, 目標(biāo)準(zhǔn)則都是為建設(shè)呢絨能夠順利產(chǎn)出 并且可以 持續(xù)發(fā)揮價值, 數(shù)據(jù)中臺對的建設(shè)內(nèi)容包含技術(shù)體系 , 數(shù)據(jù)體系 服務(wù)體系, 運(yùn)營體系
數(shù)據(jù)中臺的建設(shè)內(nèi)容包含 技術(shù)體系 數(shù)據(jù)體系 服務(wù) 體系 運(yùn)營 體系
通過這四套體系 的建設(shè) 實(shí)現(xiàn)數(shù)據(jù)中臺讓數(shù)據(jù)用起來的目標(biāo)
技術(shù)體系分兩個層面 大數(shù)據(jù)儲存計算技術(shù) 和數(shù)據(jù)中臺工具技術(shù)組建 技術(shù)體系 主要關(guān)注點(diǎn)是工具技術(shù)組建 大數(shù)據(jù)儲存計算技術(shù) 比如 hadoop spark flink greenplum elasticsearch redis phoenix 相對標(biāo)準(zhǔn), 企業(yè)需要進(jìn)行合理選型 就行, 并不需要自己建設(shè), 而且技術(shù)難度很大, 企業(yè) 也不太可能自己建設(shè), 數(shù)據(jù)中臺 工具技術(shù) 組建 包括 數(shù)據(jù)匯聚 、數(shù)據(jù)開發(fā)、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)服務(wù)管控等, 數(shù)據(jù)中臺是企業(yè)制定 和實(shí)施 數(shù)據(jù)匯聚 面膜 和加工UI反 的 場所, 也是 企業(yè) 數(shù)據(jù)體系儲存管理的工具平臺
通過工具化 產(chǎn)品化 可視化 降低技術(shù)門檻 ,讓 數(shù)據(jù)能夠被更方便地加工使用
數(shù)據(jù)體系
數(shù)據(jù)體系是數(shù)據(jù)中臺建設(shè) 管理 使用的核心要素, 全企業(yè)的數(shù)通過各種方式匯聚到數(shù)據(jù)中臺, 在數(shù)據(jù)中臺按照一定的建模方式 進(jìn)行 加工,形成企業(yè)的數(shù)據(jù)資產(chǎn)體系, 數(shù)據(jù)中臺是始終圍繞著 數(shù)據(jù)體系的建設(shè)和使用, 讓 數(shù)據(jù)體系 盡可能完整 準(zhǔn)確 使用廣泛 不同企業(yè)的業(yè)務(wù) 不同 , 數(shù)據(jù)不同, 數(shù)據(jù)體系的內(nèi)容不同, 但是建設(shè)的方法 和對工具的要求是相似的, 需要在中臺工具和建設(shè)方法的基礎(chǔ)上針對不同企業(yè)建設(shè)不同的數(shù)據(jù)體系
服務(wù)體系
數(shù)據(jù)中臺與大數(shù)據(jù)平臺的最主要區(qū)別是數(shù)據(jù)能更方便地以服務(wù)化的方式 支撐業(yè)務(wù), 而這是通過數(shù)據(jù)局中臺服務(wù)體系實(shí)現(xiàn)的,服務(wù)體系是通過數(shù)據(jù)中臺的夫婦組建能力, 把數(shù)據(jù)變成一種服務(wù)能力,比如客戶微觀畫像, 信用評估 服務(wù), 風(fēng)險預(yù)警服務(wù)等, 讓數(shù)據(jù)能夠方便 地參與到業(yè)務(wù)中并未業(yè)務(wù)帶去價值, 數(shù)字化轉(zhuǎn)型, 數(shù)據(jù)化精英, 就是讓業(yè)務(wù)決策通過數(shù)據(jù)而不是僅憑經(jīng)驗, 需要的正式數(shù)據(jù)服務(wù)能力,每家企業(yè)的業(yè)務(wù)不同對數(shù)據(jù)服務(wù)的訴求也不同,數(shù)據(jù)中臺無法產(chǎn)品化地提供企業(yè)所需要的搜友數(shù)據(jù)服務(wù)能力, 數(shù)據(jù)中臺通過提供數(shù)據(jù)服務(wù)生成 發(fā)布 監(jiān)控 管理 功能, 幫助企業(yè)逐個建立屬于自己的每一個數(shù)據(jù)服服,逐步完成企業(yè)數(shù)據(jù)服服體系的構(gòu)建,
運(yùn)營體系
運(yùn)營體系是數(shù)據(jù)中臺得以監(jiān)控 、從持續(xù)運(yùn)轉(zhuǎn)的基礎(chǔ)
運(yùn)營體系包括披平臺流程規(guī)范執(zhí)行監(jiān)督, 平臺資源占用的監(jiān)管以及優(yōu)化推動、數(shù)據(jù)質(zhì)量的監(jiān)督以及改進(jìn)推動、數(shù)據(jù)價值的評估、數(shù)據(jù)服務(wù)的推廣、稽查排名、其目標(biāo)是讓平臺可以持續(xù)監(jiān)控運(yùn)轉(zhuǎn),產(chǎn)生持續(xù)價值,數(shù)據(jù)中臺是一個復(fù)雜工程、數(shù)據(jù)的匯聚 開發(fā) 管理 服務(wù) 都是要持續(xù)進(jìn)行的工作, 如果沒有運(yùn)營體系的保障,可能會導(dǎo)致后期的參與者無從下手 隨著時間的推移 數(shù)據(jù)的質(zhì)量、服務(wù)的效率也會次序下降 進(jìn)而導(dǎo)致中臺無法使用,數(shù)據(jù)中臺是一個持續(xù)的過程
五個關(guān)鍵步驟
數(shù)據(jù)中臺在具體落地實(shí)施時,要結(jié)合技術(shù) 產(chǎn)品 數(shù)據(jù) 服務(wù) 運(yùn)營等 五個方面, 逐步開展 相關(guān)的工作 在構(gòu)建閉環(huán)時 回多考慮基礎(chǔ)設(shè)施部分的能力, 一旦閉環(huán) 建設(shè)完成, 就可以在各個環(huán)境不斷豐富能力, 逐步成為數(shù)據(jù)應(yīng)用的完整體系, 數(shù)據(jù)中農(nóng)太的建設(shè)過程主要通過五個步驟完成的:
理現(xiàn)狀、 李架構(gòu)、 建資產(chǎn)、用數(shù)據(jù)、做運(yùn)營
理現(xiàn)狀就是 組織現(xiàn)狀 、業(yè)務(wù)現(xiàn)狀 、數(shù)據(jù)現(xiàn)狀、 技術(shù)現(xiàn)狀
立交夠就是 組織架構(gòu) 也因為架構(gòu) 技術(shù)架構(gòu) 應(yīng)用架構(gòu) 數(shù)據(jù)架構(gòu)
建資產(chǎn) 就是 數(shù)據(jù)集成、資產(chǎn)萃取、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量
用數(shù)據(jù)就是 數(shù)據(jù)安全 場景服務(wù)
做運(yùn)營 監(jiān)控審計 價值評估 質(zhì)量評估 資產(chǎn)排名
梳理企業(yè)的系統(tǒng)建設(shè) 已經(jīng)擁有的數(shù)據(jù)以及業(yè)務(wù)特點(diǎn)等現(xiàn)狀 ,了解企業(yè)對數(shù)據(jù)中臺的認(rèn)知, 以及相應(yīng)的數(shù)據(jù)文化建設(shè)情況,,了解目前企業(yè)以怎么的組織形態(tài)來保證客戶的服務(wù)能力,詳細(xì)調(diào)研目前企業(yè)的it建設(shè)情況和業(yè)務(wù)數(shù)據(jù)沉淀情況,比如采用的什么數(shù)據(jù)庫 數(shù)據(jù)量 數(shù)據(jù)字段 和更新周期
立 架構(gòu)
根據(jù)現(xiàn)狀形成整體的規(guī)劃藍(lán)圖, 形成技術(shù)產(chǎn)品 數(shù)據(jù)體系 服務(wù)方式 一家 運(yùn)營重點(diǎn)等先關(guān)的方案, 梳理并明確 各個架構(gòu),企業(yè)信息架構(gòu)基本是 業(yè)務(wù)架構(gòu) 技術(shù)架構(gòu) 應(yīng)用交夠 和數(shù)據(jù)架構(gòu) 都需要這個階段進(jìn)行確認(rèn)
業(yè)務(wù)架構(gòu) 保障數(shù)據(jù)中臺能夠適用于企業(yè)的業(yè)務(wù)運(yùn)營模型和流程體系
技術(shù)架構(gòu) 主要是指技術(shù)體系中的數(shù)據(jù)基座,主要根據(jù)業(yè)務(wù)架構(gòu)近遠(yuǎn)期規(guī)劃 ,對數(shù)據(jù)的儲存和計算進(jìn)行統(tǒng)一選型
應(yīng)用價掛鉤,指數(shù)據(jù)中臺應(yīng)用架構(gòu),后面幾個關(guān)鍵步驟的內(nèi)容所以來的工具主要是由數(shù)據(jù)中臺作為平臺應(yīng)用來承接
組織架構(gòu),主要是保證中臺項目的順利落地需要企業(yè)考慮的整體組織保障,其中的角色有業(yè)務(wù)人員 iit人員 供應(yīng)商 和相關(guān)負(fù)責(zé)人
建資產(chǎn)
結(jié)合數(shù)據(jù)架構(gòu)的整體設(shè)計,通過數(shù)據(jù)資產(chǎn)體系建設(shè)方法幫助企業(yè)構(gòu)建 集符合場景需求又滿足數(shù)據(jù)架構(gòu)要求的數(shù)據(jù)資產(chǎn)體系并實(shí)施落地, 這個步驟涉及數(shù)據(jù)匯聚,數(shù)據(jù)倉庫 建設(shè) 標(biāo)簽體系建設(shè)以及 應(yīng)用數(shù)據(jù)建設(shè), 其中最關(guān)鍵的是標(biāo)簽 體系建設(shè)
所謂標(biāo)簽前體系是面向具體對象構(gòu)建的全維度數(shù)據(jù)標(biāo)簽,通過標(biāo)簽體系可以方便地支撐應(yīng)用,大數(shù)據(jù)的核心魅力和服務(wù)能力主要就體現(xiàn)在標(biāo)簽體系的服務(wù)能力上。
標(biāo)簽體系是面向具體對象構(gòu)建全維度數(shù)據(jù)標(biāo)簽, 通過標(biāo)簽體系可以方便地支撐因公,大數(shù)據(jù)的核心魅力和服務(wù)能力就體現(xiàn)在標(biāo)簽體系的服務(wù)能力上
用數(shù)據(jù)
從應(yīng)用產(chǎn)經(jīng)出發(fā), 將已經(jīng)構(gòu)建的數(shù)據(jù)資產(chǎn)通過服務(wù)化的方式, 應(yīng)用到具體的業(yè)務(wù)中,發(fā)揮數(shù)據(jù)價值,將數(shù)據(jù)資產(chǎn)快速形成服務(wù)能力 并與業(yè)務(wù)進(jìn)行對接, 咋業(yè)務(wù)中產(chǎn)生數(shù)據(jù)價值, 實(shí)現(xiàn)數(shù)據(jù)的服務(wù)化 業(yè)務(wù)化, 在服務(wù)過程中, 數(shù)據(jù)安全是不得不考慮的問題, 哪些人 能看到什么數(shù)字資產(chǎn) ,能選擇 什么類型的服務(wù) 都是需要嚴(yán)格審核。
做運(yùn)營
數(shù)據(jù)應(yīng)用 于業(yè)務(wù)后, 其產(chǎn)生 的價值通過運(yùn)營的能力不斷優(yōu)化迭代,并讓更多人感知到數(shù)據(jù)的價值點(diǎn),數(shù)據(jù)局中臺建設(shè) 是一個建設(shè)持續(xù)性中臺的過程。
多方角色回圍繞kpi 不斷挖掘數(shù)據(jù)和業(yè)務(wù)場景的結(jié)合點(diǎn), 不斷根據(jù)質(zhì)量和價值兩個點(diǎn)來運(yùn)營優(yōu)化, 企業(yè)通過 多個組織之間的配合 推進(jìn), 會逐步形成企業(yè)特有的數(shù)據(jù)文化 和認(rèn)知, 這是企業(yè)在數(shù)字化轉(zhuǎn)型中 非常重要但很那跨越的點(diǎn),
總結(jié)
- 上一篇: pymysql模块和SQL注入
- 下一篇: 国产自主研发CAD-浩辰CAD