當前位置:
首頁 >
深度学习核心技术精讲100篇(三十二)-网易实时数仓实战应用
發布時間:2025/4/5
64
豆豆
生活随笔
收集整理的這篇文章主要介紹了
深度学习核心技术精讲100篇(三十二)-网易实时数仓实战应用
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
前言
隨著大數據技術的進步,各種計算框架的涌現,數據倉庫相關技術難題已經從離線數倉逐漸過渡到實時數倉,越來越多的企業對數據的實時性提出了嚴格的要求,如何滿足企業的低延時的數據需求,如何看待批量處理和實時處理的關系,實時數倉應該如何分級,各家可能都有自己的理解,本文主要介紹網易的實時計算平臺的建設實踐以及網易對于實時數倉方面的一些規劃及展望,希望能夠起到拋磚引玉的作用。
01實時計算平臺實踐
1. 網易實時計算平臺:Sloth
網易的實時計算平臺Sloth譯成中文是樹懶的意思,繼承了網易喜歡用動物系命名大數據組件的風格,如果你看過《瘋狂動物城》,一定會對劇中的flash印象深刻。Sloth平臺的建設始于2017年12月份,至今已有3年的時間,期間平臺的彈性計算單元(ECU)規模一直呈現指數級增長,目前ECU已經突破50000個,運行的CPU數量已經達到15110核,內存超過了34T。
2. 平臺架構
總結
以上是生活随笔為你收集整理的深度学习核心技术精讲100篇(三十二)-网易实时数仓实战应用的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Java进阶知识-数组类型
- 下一篇: 深度学习核心技术精讲100篇(三十四)-