数仓数据分层(ODS DWD DWS ADS)
ODS
DWD
DWS
DWS,俗稱的數(shù)據(jù)服務(wù)層,也有叫做數(shù)據(jù)聚合層.不過按照經(jīng)典數(shù)據(jù)建模理論,一般稱之為前者,也就是數(shù)據(jù)服務(wù)層,為更上層的ADS層或者直接面向需求方服務(wù).
DWS建模,一般使用主題建模,維度建模等方式
主題建模,顧名思義,圍繞某一個業(yè)務(wù)主體進(jìn)行數(shù)據(jù)建模,將相關(guān)數(shù)據(jù)抽離提取出來.
如,將流量會話按照天,月進(jìn)行聚合
將每日新用戶進(jìn)行聚合
將每日活躍用戶進(jìn)行聚合
維度建模,其實也差不多,不過是根據(jù)業(yè)務(wù)需要,提前將后續(xù)數(shù)據(jù)查詢處理需要的維度數(shù)據(jù)抽離處理出來,方便后續(xù)查詢使用.
如將運營位維度數(shù)據(jù)聚合
將渠道拉新維度數(shù)據(jù)聚合
ADS
1.這是應(yīng)用服務(wù)層,一般就直接對接OLAP分析,或者業(yè)務(wù)層數(shù)據(jù)調(diào)用接口了;
2.這是最頂層,一般都是結(jié)果類型數(shù)據(jù),可以直接拿去使用或者展示的數(shù)據(jù)了.也是對數(shù)據(jù)抽離分析程度最高的一層數(shù)據(jù);
3.這一層是需求最明確的一層,根據(jù)業(yè)務(wù)需求來決定數(shù)據(jù)維度和結(jié)果分析.類似代碼最外層,接口是相對最固化的;
新人創(chuàng)作打卡挑戰(zhàn)賽發(fā)博客就能抽獎!定制產(chǎn)品紅包拿不停!
總結(jié)
以上是生活随笔為你收集整理的数仓数据分层(ODS DWD DWS ADS)的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 只需几分钟即可安装Red Hat Con
- 下一篇: 养生常识 淘米水14个妙用一般人不知道