日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

千万数据却只用6步管理!这套数据治理架构如何100%复用?

發(fā)布時間:2025/3/15 编程问答 58 豆豆
生活随笔 收集整理的這篇文章主要介紹了 千万数据却只用6步管理!这套数据治理架构如何100%复用? 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

企業(yè)數(shù)據(jù)其實是資產(chǎn),那如何讓資產(chǎn)產(chǎn)生作用,這是一門大學問。

主數(shù)據(jù)管理是數(shù)據(jù)資產(chǎn)管理最重要和核心的內(nèi)容,本文通過“一平臺、兩體系、三性特征、四個統(tǒng)一、五個超越、六類服務 ”應用場景,比較體系化詳盡的介紹主數(shù)據(jù)治理、共享和應用全過程。

主數(shù)據(jù)管理要點概覽

主數(shù)據(jù)是數(shù)據(jù)之源,是數(shù)據(jù)資產(chǎn)管理的核心,是信息系統(tǒng)互聯(lián)互通的基石,是信息化和數(shù)字化的重要基礎(chǔ)。

?

1)一平臺:搭建一個一體化數(shù)據(jù)治理和共享平臺;

2)兩體系:建立兩個體系(數(shù)據(jù)標準體系和保障體系);

3)三性特征:確保主數(shù)據(jù)三性特征(唯一性、準確性、共享性);

4)四個統(tǒng)一:達到四個統(tǒng)一(統(tǒng)一標準、統(tǒng)一來源、統(tǒng)一接口、統(tǒng)一服務);

5)五個超越:實現(xiàn)五個超越(超越部門、超越流程、超越主體、超越系統(tǒng)、超越技術(shù));

6)六類服務:提供六種數(shù)據(jù)服務(數(shù)據(jù)訂閱/分發(fā)服務、主數(shù)據(jù)查詢/申請服務、數(shù)據(jù)調(diào)用API服務、公共數(shù)據(jù)資源池、數(shù)據(jù)資源服務、數(shù)據(jù)即時服務)。

一、一體化數(shù)據(jù)治理、共享和應用詳解

1.1 一平臺

建立企業(yè)級的、一體化的數(shù)據(jù)治理和共享平臺,確保數(shù)據(jù)資源中心的數(shù)據(jù)質(zhì)量和安全管理。詳細功能描述可以參照數(shù)據(jù)治理平臺工具前世今生。

?

基于Spring boot框架, 引入Eureka、Zuul、Feign、Ribbon等Spring cloud相關(guān)組件,形成微服務解決方案,前端頁面應用服務實現(xiàn)前后端分離。

?

云計算為數(shù)據(jù)管理工具提供了能夠滿足“共享服務”功能的新的架構(gòu)模式,采用微服務技術(shù)滿足數(shù)據(jù)管理工具的高可用性、穩(wěn)定性和易用性。人工智能夠主數(shù)據(jù)清洗提供了自動化思路,利用自然語言處理及數(shù)據(jù)標準庫提升數(shù)據(jù)質(zhì)量。

基于統(tǒng)一技術(shù)架構(gòu)、統(tǒng)一指標數(shù)據(jù)驅(qū)動的元數(shù)據(jù)(業(yè)務元數(shù)據(jù)、管理元數(shù)據(jù)、技術(shù)元數(shù)據(jù)等)、統(tǒng)一治理工具、統(tǒng)一安全管控,通過不同的模塊組合,形成不同的數(shù)據(jù)服務和治理解決方案;

?

二、兩個體系

2.1 數(shù)據(jù)管理體系

?

數(shù)據(jù)管理體系包含:數(shù)據(jù)標準管理體系、數(shù)據(jù)管控體系、數(shù)據(jù)技術(shù)服務體系、數(shù)據(jù)質(zhì)量要求、數(shù)據(jù)安全要求等。

2.2 數(shù)據(jù)運維體系

建五位一體數(shù)據(jù)運維服務體系,加強應用推廣的組織和培訓指導,有序推進數(shù)據(jù)共享、應用

?

三、主數(shù)據(jù)三性特征

3.1 唯一性

在一個系統(tǒng)、一個平臺,甚至一個企業(yè)范圍內(nèi),主數(shù)據(jù)實體要求具有唯一標識即數(shù)據(jù)編碼,同名同義,保證同一個對象在應用的唯一性,如:統(tǒng)一員工和組織主數(shù)據(jù),對所有系統(tǒng)的員工和組織進行規(guī)范。

3.2 準確性

3.3 共享性

跨部門、跨系統(tǒng)高度共享的數(shù)據(jù),可以被多個認識主體接收和利用。

?

支持企業(yè)多業(yè)務類型、多地域經(jīng)營的應用,在流程規(guī)范、系統(tǒng)集成、主題共享、系統(tǒng)數(shù)據(jù)一致性等方面都需要通過數(shù)據(jù)標準化來支撐,從而最終提高管理效率,加強管控落地。

?

數(shù)據(jù)治理工作在提升企業(yè)整體價值的同時,也為企業(yè)內(nèi)部的數(shù)據(jù)共享等具體提供了良好的和可持續(xù)的數(shù)據(jù)基礎(chǔ),為數(shù)據(jù)的進一步挖掘和分析夯實基礎(chǔ)。

四、四個統(tǒng)一

這塊沒什么價值,略過。

五、五個超越

5.5 超越技術(shù)

超越技術(shù):由于主數(shù)據(jù)要滿足跨部門的業(yè)務協(xié)同,因而必須適應采用不同技術(shù)規(guī)范的不同業(yè)務系統(tǒng),所以主數(shù)據(jù)必須應用一種能夠為各類異構(gòu)系統(tǒng)所兼容的技術(shù)條件。

從這個意義上講,面向微服務架構(gòu)為主數(shù)據(jù)的實施提供了有效的工具。在不同環(huán)境、不同場景下,主數(shù)據(jù)的技術(shù)是可以靈活應對的。主數(shù)據(jù)的集成架構(gòu)是多樣的,如:總線型結(jié)構(gòu)、星型結(jié)構(gòu)、端到端結(jié)構(gòu);集成技術(shù)也是多樣的,如:webservice、REST、ETL、MQ、kafka等;不論是架構(gòu)還是技術(shù),沒有最好的只有更合適的。

企業(yè)在做技術(shù)選型的時候,要充分考慮企業(yè)的核心業(yè)務需求和未來的發(fā)展要求去構(gòu)建自身的主數(shù)據(jù)技術(shù)體系。

六、六種數(shù)據(jù)服務

以下為6種比較常用的數(shù)據(jù)服務方式,其中,1-4是主數(shù)據(jù)應用的服務,5-6已經(jīng)超越主數(shù)據(jù)的概念,可以針對交易數(shù)據(jù),指標數(shù)據(jù)提供數(shù)據(jù)共享服務。

?

這里講一個數(shù)據(jù)資源服務吧。

數(shù)據(jù)資源服務是各類數(shù)據(jù)高級應用,是將源系統(tǒng)數(shù)據(jù)大集中在數(shù)據(jù)資源中心,通過大數(shù)據(jù)技術(shù)工具,提供各類數(shù)據(jù)自助式服務。

通過相關(guān)工具(Sqoop等)將源系統(tǒng)的數(shù)據(jù)(HR、財務、業(yè)務等)抽取到大數(shù)據(jù)平臺,經(jīng)過整合、清洗、歸并后形成各種主題數(shù)據(jù),對外提供不同的數(shù)據(jù)服務(主數(shù)據(jù)、交易數(shù)據(jù)、指標數(shù)據(jù));

我整理了100+數(shù)字化報告,50+名企案例,10+T行業(yè)解決方案,回復“資料包”即可獲得!

總結(jié)

以上是生活随笔為你收集整理的千万数据却只用6步管理!这套数据治理架构如何100%复用?的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。