日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

数据智能构建管理平台Dataphin V2.9.4.3版本发布

發布時間:2024/9/3 编程问答 50 豆豆
生活随笔 收集整理的這篇文章主要介紹了 数据智能构建管理平台Dataphin V2.9.4.3版本发布 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
簡介:Dataphin發布V2.9.4.3版本升級多項產品能力,該版本在產品功能和用戶體驗上都進行了優化和提升,旨在為用戶提供更完善的產品能力和體驗,以加速企業數據中臺建設進程。

-更多關于數智化轉型、數據中臺內容請加入阿里云數據中臺交流群—數智俱樂部 和關注官方微信公總號(文末掃描二維碼或點此加入)

-阿里云數據中臺官網 https://dp.alibaba.com/index


1 產品簡介

Dataphin是阿里巴巴集團OneData數據治理方法論基于內部實踐的產品化輸出,一站式提供數據采、建、管、用全生命周期管理的能力,以助力企業顯著提升數據治理水平,構建質量可靠、消費便捷、生產安全經濟的企業級數據中臺。Dataphin提供多種計算引擎支持及可拓展的開放能力,以適應各行各業的平臺技術架構和個性化訴求。

2 版本概覽

2021年6月,Dataphin發布V2.9.4.3版本,升級多項產品能力。

  • 平臺能力上,拓展計算引擎豐富度和OpenAPI覆蓋度
  • 數據集成模塊,拓展支持的MySQL數據源版本和一鍵建表覆蓋范圍,以提升配置效率
  • 監控能力上,優化告警接收規則配置,提提升靈活性適配更多監控場景
  • 資產中心,優化邏輯表預覽及敏感字段識別規則,完善資產鏈路
  • 數據服務拓展API分頁查詢能力,以拓展查詢范圍,提升服務響應效率和鏈接穩定性

該版本在產品功能和用戶體驗上都進行了優化和提升,旨在為用戶提供更完善的產品能力和體驗,以加速企業數據中臺建設進程。

3 新版本重點特性詳解

特性1:計算引擎新增支持CDH6

新增針對CDH6計算引擎的適配,以提升多引擎兼容能力;截至當前版本,Dataphin支持的計算引擎類型包括:MaxCompute、CDH5、CDH6、EMR。

特性2:MySQL數據源支持8.x版本

目前,8.0是市面上比較主流且使用度較廣的MySQL數據庫版本。Dataphin在已經支持MySQL 5.6和5.7數據源的基礎上,新增支持MySQL 8.0版本,可以在數據同步、數據服務等模塊基于該數據源進行配置,以提升業務數據覆蓋度。

特性3:數據集成支持在Oracle目標庫一鍵建表

支持在目Oracle目標庫一鍵創建數據建表,以簡化配置流程,提升數據同步配置效率。截至當前版本,一鍵建表功能一共覆蓋4種目標數據源:MaxCompute、Oracle、Hive、AnalyticDB for PostgreSQL

特性4:任務運行監控和質量監控支持給不同的接收對象指定不同的告警和接收方式

升級前,針對所有選中的接收人,均需要配置相同的告警接收方式。升級至本版本后,針對不同的接收人類型,可以指定不同的接收方式,以根據實際情況實現區別告警。如:任務負責人需要了解自己所負責的任務運行概況,但不需要立即處理異常情況,可以選擇短信告警;值班負責人需要及時發現異常并處理,可以選擇電話作為強提醒;項目管理員需要定期統計告警概況,可以選擇郵件告警以方便記錄和統計。

特性5:資產地圖新增邏輯表數據預覽功能、資產安全支持手動觸發敏感字段識別

新增邏輯表預覽功能,針對有權限的字段,直接展示抽樣的數據記錄,若字段設置過脫敏規則,則僅展示脫敏后的數據;針對無權限的字段,提示“無權限”字樣并提供快捷申請的跳轉鏈接。結合該功能,Dataphin完善了邏輯表從研發到資產沉淀到消費預覽的全鏈路,提升了建模體驗。

默認情況下,在資產安全模塊配置了敏感數據識別規則后,次日開始每日定時進行掃描。本次在每日定時掃描的基礎上,新增支持用戶手動觸發敏感數據識別任務的運行,以實現新增規則立即生效,以及臨時變更場景下的記錄及時更新,提升敏感數據識別覆蓋場景。

特性6:數據服務支持基于Impala數據源創建的API分頁查詢,以拓展查詢范圍,提升查詢穩定性

歷史版本中,考慮到查詢性能,基于Impala數據源創建的的API單次查詢僅支持返回最大1000條結果,無法滿足大數據量查詢場景,影響下游業務使用。本次針對基于Impala數據源創建的API,提供分頁查詢能力,支持通過limit或offset語句設置分頁條件,以保證服務連接穩定性和相應效率,支持大數據量查詢的場景。


4 總結與展望

本次發布的V2.9.4.3版本中,Dataphin圍繞計算引擎、數據源、數據集成、監控告警、數據服務進行了功能迭代升級;在下一個版本中,我們將重點支持FusionInsight計算引擎適配、數據萃取升級、OpenAPI擴展、運維補數據能力提升、數據服務多項目等功能,敬請期待!



相關產品:智能數據構建與管理Dataphin




數據中臺是企業數智化的必經之路,阿里巴巴認為數據中臺是集方法論、工具、組織于一體的,“快”、“準”、“全”、“統”、“通”的智能大數據體系。

目前正通過阿里云對外輸出系列解決方案,包括通用數據中臺解決方案、零售數據中臺解決方案、金融數據中臺解決方案、互聯網數據中臺解決方案、政務數據中臺解決方案等細分場景。

其中阿里云數據中臺產品矩陣是以Dataphin為基座,以Quick系列為業務場景化切入,包括:

  • - Dataphin,一站式、智能化的數據構建及管理平臺;
  • - Quick BI,隨時隨地 智能決策;
  • - Quick Audience,全方位洞察、全域營銷、智能增長;
  • - Quick A+, 跨多端全域應用體驗分析及洞察的一站式數據化運營平臺;
  • - Quick Stock, 智能貨品運營平臺;
  • - Quick Decision,智能決策平臺;

官方站點:

數據中臺官網 https://dp.alibaba.com

釘釘溝通群和微信公眾號

原文鏈接:https://developer.aliyun.com/article/785197?

版權聲明:本文內容由阿里云實名注冊用戶自發貢獻,版權歸原作者所有,阿里云開發者社區不擁有其著作權,亦不承擔相應法律責任。具體規則請查看《阿里云開發者社區用戶服務協議》和《阿里云開發者社區知識產權保護指引》。如果您發現本社區中有涉嫌抄襲的內容,填寫侵權投訴表單進行舉報,一經查實,本社區將立刻刪除涉嫌侵權內容。

總結

以上是生活随笔為你收集整理的数据智能构建管理平台Dataphin V2.9.4.3版本发布的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。