阅读《基于知识图谱技术的数据资产管理设计与应用验证研究》笔记
文章目錄
- 1、摘要
- 2、前言
- 3、研究概述
- 3.1 數據資產管理內涵
- 3.2 數據資產管理的意義
- 4、研究內容
- 4.1 研究思路
- 4.2 研究內容
1、摘要
??首先看一下這篇文章的五個關鍵詞:
關鍵詞:{數據資產目錄數據資產地圖數據血緣關系數據鏈路知識圖譜關鍵詞: \left\{ \begin{matrix} 數據資產目錄 \\ 數據資產地圖 \\ 數據血緣關系 \\ 數據鏈路 \\ 知識圖譜 \end{matrix} \right. 關鍵詞:????????????數據資產目錄數據資產地圖數據血緣關系數據鏈路知識圖譜?
??接著就著關鍵詞提煉摘要:
??動機:為落實國網公司新的戰略部署,公司組織制定了企業中臺建設方案,引入了數據資產管理。
??方法:1、運用知識圖譜技術,構建數據資產地圖管理模型。2、以微服務的架構,發布數據資產目錄。
??作用:1、提供豐富的業務視圖、數據視圖溯源和可視化展現。2、提高數據資產管理能力,讓用戶能靈活定制業務應用場景和追溯業務應用源數據等,持續挖掘數據價值。
2、前言
??細化摘要:1、為推進企業中臺建設 ,通過數據資產目錄建設、數據質量治理提升實現數據資產管理。2、通過數據資產地圖模型構建,提供業務、數據視圖的溯源和可視化展現能力,提升數據的運營管理能力和共享共用能力,為實現數據全生命周期管控提供基本工具。
3、研究概述
3.1 數據資產管理內涵
??數據資產管理的主要目標:提升數據資產標準化、精益化、信息化管理水平。
??數據資產管理的主要理念和方法:統籌協調資產在規劃、設計、建設、運維、改造、退役處置等全生命周期的管理行為和技術要求。
??數據資產管理的核心:把數據對象作為一種全新的資產形態,不再將數據局限于單一的業務部門和領域,從總體視角重新構建數據與數據之間的綜合關聯和潛在聯系,以構建公司數據資產管理體系為目標,開展包括數據資產治理、數據資產運營和數據資產應用的數據資產管理工作。
3.2 數據資產管理的意義
??數據資產管理是國網安徽電力實現電力物聯網的重要內容,是數據中臺的重要應用之一。通過數據資產梳理,發布資產目錄,提供完善的企業核心數據資源索引工具;通過前瞻性的設計業務視圖、數據視圖模型并采用可視化手段固化成果,構建數據資產視圖,為數據資產全生命周期管理提供有效工具,為公司數據資產統一管控、應用,建立公司核心數據資源的流程化管理機制,提升數據集成和服務能力,促進數據與業務的共享融合以及為數據價值的深度挖掘奠定基礎。
4、研究內容
4.1 研究思路
??基石:基于國網安徽電力全業務統一數據中心現有建設成果以及接入的35套系統。
??方法:
??1、應用包括知識獲取、知識融合、知識計算及應用的知識圖譜技術,通過大量的機器學習等自然語言處理技術(NLP),對電網知識資源及其載體進行挖掘、分析、構建、計算。
??2、運用多種可視化方法,繪制和展示電網知識資源及他們之間的相互聯系形成知識圖譜,實現從非結構化、半結構化、結構化數據中獲取電網知識,融合構建不同數據源知識關聯,并基于知識圖譜計算功能進行知識圖譜的應用。
??3、以微服務架構,發布數據資源目錄,結合數據資產視圖使用,可以對業務視圖溯源數據視圖,數據視圖溯源實體表,實體表查詢血緣關系,追溯源表、源系統、源功能,查詢業務數據、實體表源數據等。
4.2 研究內容
??1、知識圖譜:
??個性化推薦系統主要用知識圖譜特征學習和推薦系統相結合,通常有如下三種方式實現個性化推薦,如圖1所示:
??2、 數據資產目錄:
?? 定義:數據資產目錄,是按照分類、主題、應用多個角度對數據資產進行管理、識別、定位、發現、評估、共享的數據組織管理工具。
?? 作用:通過數據資產目錄的建立,可以實現數據資源的智能搜索、數據資產臺賬信息展示、數據集成服務能力提升以及建立數據資源全生命周期管理工具,一方面可以盤活企業數據資產當前分布情況和資產質量,另一方面也可以作為一種語義層抽象,用于驅動整個企業數據資產的加工處理過程。如圖2所示。 圖2:數據資產管理整體方案
?? 數據資產目錄的構建主要分為以下3步:
(1) 數據資源盤點,梳理表與功能對應關系。全面梳理接入業務系統和數據模型數據字典,開展數據表、字段的中文描述補充完善工作及系統功能與表對應關系的梳理逐步完善,形成真實完整的數據字典檔案;
(2) 流轉鏈路解析,識別標記數據來源。通過ETL解析工具,解析OGG、Informatica工具的配置文件或資源庫信息,分析ETL過程的源表、目標表。依據數據字典,梳理數據流轉路徑,標識數據來源和鏈路關系;
(3) 構建數據資產目錄,面向各部門、單位發布。從公司數據資源分類、數據信息描述范式等方面,制定目錄結構規范;構建覆蓋“系統-功能-表-字段”的數據資產目錄,從統一權限系統獲取系統功能菜單,梳理每項功能對應數據表目錄表間數據流轉關系,進一步形成“業務-數據”的對應關系,發布數據資產目錄。
??3、 數據資產地圖
??從公司業務結構出發,基于通用業務建模及數據視圖建模方法,通過業務和數據映射關系建立、業務視圖溯源、數據視圖溯源、業數視圖可視化開發四個步驟構建數據資產地圖,包括業務視圖、數據視圖及業務和數據視圖之間映射關系,梳理識別數據資產及數據資產關系全貌。
??以上,我對這篇文章的概念進行了一定的整理。《基于知識圖譜技術的數據資產管理設計與應用驗證研究》的作者:
總結
以上是生活随笔為你收集整理的阅读《基于知识图谱技术的数据资产管理设计与应用验证研究》笔记的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: en开头的单词_大道至简:为什么记英语单
- 下一篇: 解决Adobe Flash Player