数据管理的3种方法,看完后感叹:数字化转型、数据中台真不难
結(jié)尾給大家整理了超多干貨!
企業(yè)建立數(shù)據(jù)中臺,是為了能夠快速的賦能業(yè)務(wù)進(jìn)行落地實(shí)施、改造、試錯、轉(zhuǎn)型;快速提升組織之間的協(xié)同效率,降低系統(tǒng)成本,實(shí)現(xiàn)數(shù)字化-智能化轉(zhuǎn)型。
當(dāng)數(shù)據(jù)匯集之后,企業(yè)在做數(shù)據(jù)治理、數(shù)據(jù)建模、數(shù)據(jù)資產(chǎn)管理等工作之前,一定要先對企業(yè)的數(shù)據(jù)進(jìn)行數(shù)據(jù)盤點(diǎn),然后再去做數(shù)據(jù)資源規(guī)劃。
那么,如何進(jìn)行有效的數(shù)據(jù)資源規(guī)劃與設(shè)計(jì)呢?本篇,按順序介紹如下:
數(shù)據(jù)資源規(guī)劃的目標(biāo)
在問為什么要做數(shù)據(jù)資源規(guī)劃,先和大家對企業(yè)信息化建設(shè)做個簡單的梳理和分析。
目前,大多數(shù)企業(yè)的信息化建設(shè)還處于無序的狀態(tài),缺乏統(tǒng)一的流程與規(guī)范。
每個部門都有建立自己煙囪式的IT系統(tǒng)、建立煙囪式獨(dú)立的數(shù)據(jù)分析平臺和數(shù)據(jù)倉庫或引進(jìn)各種外部應(yīng)用軟件再進(jìn)行二次開發(fā),它們彼此之間相互獨(dú)立,采用單項(xiàng)引進(jìn)的開發(fā)模式,只是一味地追求各自的功能實(shí)現(xiàn)。
所有數(shù)據(jù)庫差不多都是按報(bào)表格式的方式建立,導(dǎo)致信息孤島的產(chǎn)生,數(shù)據(jù)無法互聯(lián)共享有章可循,造成在混亂的業(yè)務(wù)系統(tǒng)環(huán)境中,無序、矛盾、冗余的數(shù)據(jù)隨處可見。
?
只重視制定總體規(guī)劃,在制定規(guī)劃方面存在很多問題,總結(jié)一下可以用兩個詞來概括:滯后與缺乏。
1、滯后
企業(yè)更加側(cè)重于網(wǎng)絡(luò)建設(shè),在落地方案和技術(shù)選型等方面粒度過細(xì),在數(shù)據(jù)資源開發(fā)利用方面的規(guī)劃粒度過粗;管理層和決策層的應(yīng)用滯后于數(shù)據(jù)應(yīng)用層,沒有形成以數(shù)據(jù)驅(qū)動業(yè)務(wù)的統(tǒng)一認(rèn)知。
2、缺乏
一方面,數(shù)據(jù)資源整合目標(biāo)相對泛化,缺乏總體數(shù)據(jù)規(guī)劃的意識,沒有整合信息孤島的措施,數(shù)據(jù)中心建設(shè)和數(shù)據(jù)集中管理等規(guī)劃缺乏可操作性,缺乏數(shù)據(jù)標(biāo)準(zhǔn)化建設(shè)方面的規(guī)劃,更多的是在喊口號,說概念,沒有真正的實(shí)際行動;
另一方面,應(yīng)用系統(tǒng)規(guī)劃沒有重組優(yōu)化的想法,缺少如何集成已有應(yīng)用系統(tǒng)的方法,在新應(yīng)用系統(tǒng)落地技術(shù)選型方面描述過于細(xì),甚至形成錯誤的模式和觀念,觀念還停留在企業(yè)信息化就是網(wǎng)絡(luò)加ERP系統(tǒng)的思想階段。
實(shí)際上,企業(yè)信息數(shù)字化建設(shè)面臨的瓶頸問題并不只是在網(wǎng)絡(luò)搭建、設(shè)備或者應(yīng)用軟件的技術(shù)選型上面,而是如何運(yùn)用科學(xué)的方法,將分散、孤立的各類信息匯集起來,消除信息孤島,實(shí)現(xiàn)數(shù)據(jù)信息共享。
解決這一問題的關(guān)鍵就是做好數(shù)據(jù)資源規(guī)劃。數(shù)據(jù)資源規(guī)劃是一個企業(yè)發(fā)展戰(zhàn)略規(guī)劃的另一種延伸,是企業(yè)信息化建設(shè)的基礎(chǔ)工程,只有在做到數(shù)據(jù)環(huán)境改造,應(yīng)用系統(tǒng)集成的前提之下,才能做好數(shù)據(jù)資源規(guī)劃,促進(jìn)數(shù)據(jù)標(biāo)準(zhǔn)化的建設(shè)。
數(shù)據(jù)資源規(guī)劃它的目標(biāo)是通過規(guī)范化的方式來發(fā)現(xiàn)企業(yè)業(yè)務(wù)的狀況;通過規(guī)范數(shù)據(jù)源,解決數(shù)據(jù)源一致性問題;通過規(guī)范數(shù)據(jù)模型,明確數(shù)據(jù)關(guān)系。
數(shù)據(jù)資源規(guī)劃的內(nèi)容
當(dāng)企業(yè)業(yè)務(wù)系統(tǒng)逐漸增多,點(diǎn)對點(diǎn)的集成方案將變成一場災(zāi)難。主要有以下幾個原因:
為了解決以上問題,企業(yè)需要先梳理現(xiàn)狀、確定組織、認(rèn)識數(shù)據(jù)、數(shù)據(jù)呈現(xiàn),從而清晰的了解認(rèn)識到企業(yè)的真實(shí)情況,從中找到數(shù)據(jù)資源規(guī)劃破局的方法。
?
1、梳理現(xiàn)狀
通過從以下四個方面,梳理出企業(yè)現(xiàn)狀,統(tǒng)計(jì)出數(shù)據(jù)來源,確定數(shù)據(jù)資源分類,做好數(shù)據(jù)評估,確定當(dāng)前數(shù)據(jù)容量,結(jié)合業(yè)務(wù)運(yùn)行頻度,數(shù)據(jù)產(chǎn)生效率,預(yù)測數(shù)據(jù)成長規(guī)模。
- 業(yè)務(wù)角度:梳理業(yè)務(wù)流程、核心業(yè)務(wù)指標(biāo)、業(yè)務(wù)數(shù)據(jù)應(yīng)用,看是否可以找到業(yè)務(wù)新的創(chuàng)新點(diǎn);
- 數(shù)據(jù)角度:梳理目前企業(yè)有什么數(shù)據(jù),數(shù)據(jù)來自什么業(yè)務(wù)系統(tǒng),數(shù)據(jù)用在哪里,數(shù)據(jù)如何存儲,安全與否;業(yè)務(wù)還可以采集到什么數(shù)據(jù);還缺什么數(shù)據(jù);目前企業(yè)數(shù)據(jù)建設(shè)的情況;
- 技術(shù)角度:梳理目前各個業(yè)務(wù)系統(tǒng)的拓?fù)浣Y(jié)構(gòu)、技術(shù)架構(gòu)、系統(tǒng)的開發(fā)語言和系統(tǒng)的開放性
- 組織中心:了解企業(yè)是否有完善的組織架構(gòu);明確知道各部門、各個業(yè)務(wù)系統(tǒng)的分工機(jī)制、職能邊界與配合方式
2、確定組織
在認(rèn)知上、在流程上、在業(yè)務(wù)上、在實(shí)踐上形成統(tǒng)一的規(guī)范與流程,只有在規(guī)范和流程的前提之下,數(shù)據(jù)相關(guān)人員才能更好的相互協(xié)作;
其次,對整個企業(yè)組織需求進(jìn)行重新分析和調(diào)研,根據(jù)目前企業(yè)實(shí)際的數(shù)據(jù)規(guī)模、數(shù)據(jù)訪問頻度、數(shù)據(jù)存儲等特性,規(guī)劃數(shù)據(jù)資源的存儲容量,設(shè)定不一樣的數(shù)據(jù)存儲架構(gòu)
3、認(rèn)識數(shù)據(jù)
基于業(yè)務(wù)模型,了解數(shù)據(jù)的分布特性,洞察數(shù)據(jù)的特征,檢驗(yàn)數(shù)據(jù)的質(zhì)量;分析各數(shù)據(jù)源之間的內(nèi)在關(guān)聯(lián)關(guān)系、相互依賴關(guān)系、數(shù)據(jù)變化的影響關(guān)系等,確定各數(shù)據(jù)源之間的數(shù)據(jù)流向,明確的知道企業(yè)目前的數(shù)據(jù)生態(tài)和數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系,為設(shè)計(jì)總體數(shù)據(jù)架構(gòu)和模型提供有利的依據(jù)。
4、數(shù)據(jù)呈現(xiàn)
基于數(shù)據(jù)情況提供完整的數(shù)據(jù)資源分析報(bào)告;基于數(shù)據(jù)應(yīng)用的使用,設(shè)計(jì)合理的數(shù)據(jù)共享和數(shù)據(jù)服務(wù)方式
數(shù)據(jù)資源規(guī)劃的方法
1、構(gòu)建數(shù)據(jù)體系
構(gòu)建企業(yè)數(shù)據(jù)體系之前,需要先梳理清楚企業(yè)數(shù)據(jù)資源管理的業(yè)務(wù)體系,才能保證數(shù)據(jù)來源的可靠性。
?
數(shù)據(jù)生命周期運(yùn)維體系圖
數(shù)據(jù)的業(yè)務(wù)體系,首先從數(shù)據(jù)的整個生命周期來看每個階段都需要什么數(shù)據(jù)做支撐,才能形成龐大的數(shù)據(jù)體系,然后再基于業(yè)務(wù)體系去劃分?jǐn)?shù)據(jù)體系,具體解決的思路、業(yè)務(wù)流程以及需要注重的功能點(diǎn)如下圖所示:
?
2、建立數(shù)據(jù)標(biāo)準(zhǔn)體系
?
梳理匯總企業(yè)現(xiàn)有的各類業(yè)務(wù)的數(shù)據(jù)標(biāo)準(zhǔn)后,篩選出可直接參考和使用的標(biāo)準(zhǔn)與行業(yè)標(biāo)準(zhǔn)相互結(jié)合,制定出新的數(shù)據(jù)標(biāo)準(zhǔn)體系,形成一套標(biāo)準(zhǔn)化的數(shù)據(jù)規(guī)范,對具體數(shù)據(jù)項(xiàng)的定義、口徑、格式、取值、單位等進(jìn)行規(guī)范說明,提升數(shù)據(jù)質(zhì)量,最終實(shí)現(xiàn)企業(yè)數(shù)據(jù)資源的統(tǒng)一管理和展現(xiàn)
3、數(shù)據(jù)資源整合
通過匯集企業(yè)全域級數(shù)據(jù),做數(shù)據(jù)資源整合,為業(yè)務(wù)融合提供有力支撐
?
1)構(gòu)建數(shù)據(jù)畫像,理清數(shù)據(jù)脈絡(luò)
- 數(shù)據(jù)分類:基于業(yè)務(wù)體系進(jìn)行數(shù)據(jù)分類,建立數(shù)據(jù)資源目錄,對各類數(shù)據(jù)進(jìn)行相應(yīng)的描述
- 數(shù)據(jù)關(guān)系:明確數(shù)據(jù)之間的流轉(zhuǎn)關(guān)系,設(shè)計(jì)出合理的數(shù)據(jù)流路徑,統(tǒng)一數(shù)據(jù)的口徑
- 責(zé)任主體:確定數(shù)據(jù)生命周期中每個階段數(shù)據(jù)的責(zé)任主體和歸屬狀態(tài)
2) 構(gòu)建數(shù)據(jù)管理,規(guī)范數(shù)據(jù)秩序
- 數(shù)據(jù)存儲管理:基于集中統(tǒng)一共享,分層分級管理的思路原則,對于不同類型的數(shù)據(jù),采用不同的數(shù)據(jù)存儲方式
- 數(shù)據(jù)規(guī)整入庫:對已存入數(shù)據(jù)庫中的數(shù)據(jù)、未建庫的數(shù)據(jù)以及各種紙質(zhì)/電子文檔數(shù)據(jù)進(jìn)行統(tǒng)一規(guī)整,建立數(shù)據(jù)入庫標(biāo)準(zhǔn)與秩序,保證數(shù)據(jù)有序存儲和使用的便捷性
- 數(shù)據(jù)更新管理:在機(jī)制和工具上設(shè)置雙重保障的前提下,保障數(shù)據(jù)更新管理的規(guī)范性、安全性和隱私性。建立完善的動態(tài)更新機(jī)制和操作規(guī)范流程,對數(shù)據(jù)進(jìn)行統(tǒng)一管理,為數(shù)據(jù)入庫更新提供有效的支持;同時,結(jié)合數(shù)據(jù)庫更新管理系統(tǒng)對數(shù)據(jù)進(jìn)行安全檢測、入庫更新、數(shù)據(jù)導(dǎo)出,提供全鏈路的保障機(jī)制
3) 提供數(shù)據(jù)內(nèi)外共享服務(wù)
在確保數(shù)據(jù)安全和數(shù)據(jù)隱私的前提下,設(shè)計(jì)合理的數(shù)據(jù)共享與數(shù)據(jù)服務(wù)
4、總結(jié)
本文從數(shù)據(jù)規(guī)劃建設(shè)目的、內(nèi)容和方法三方面,和大家聊一聊數(shù)據(jù)資源規(guī)劃的若干事情。
數(shù)據(jù)資源規(guī)劃是對數(shù)據(jù)建模、采集、加工、存儲、應(yīng)用等方面進(jìn)行規(guī)劃。首先,基于業(yè)務(wù)厘清數(shù)據(jù)流向、建立數(shù)據(jù)模型,形成數(shù)據(jù)資源應(yīng)用與管理標(biāo)準(zhǔn)體系;其次,融合異構(gòu)數(shù)據(jù),建立數(shù)據(jù)安全管理體系,共建企業(yè)數(shù)據(jù)生態(tài)圈,為做好數(shù)據(jù)集成、數(shù)據(jù)共享與服務(wù),提供有力的數(shù)據(jù)支撐和保障。
在數(shù)據(jù)資源規(guī)劃的過程當(dāng)中,需要從法規(guī)、數(shù)據(jù)標(biāo)準(zhǔn)、技術(shù)三方面做到“四要”,一起共同建設(shè),合力破局。
最后,我還整理了100+行業(yè)數(shù)字化報(bào)告,50+名企案例,10+TOP廠商解決方案等數(shù)據(jù)干貨,評論“資料”就行。
總結(jié)
以上是生活随笔為你收集整理的数据管理的3种方法,看完后感叹:数字化转型、数据中台真不难的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 如何在weblogic启动时让其加载指定
- 下一篇: 数据新动能:帆软第四届智数大会圆满落幕