【ACP】阿里云ACP吐血汇总(一)
生活随笔
收集整理的這篇文章主要介紹了
【ACP】阿里云ACP吐血汇总(一)
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
文章目錄
- 一、大數據基礎知識小結
- (1)數據分析
- (2)數據倉庫系統
- (3)數據倉庫解決的問題
- (4)大數據的理解
- 二、阿里云大數據產品體系
- (1)產品體系概況:
- (2)阿里云數加平臺定位:
- (3)阿里云大數據基礎產品:
- (4)阿里云數加平臺:
- 三、大數據產品典型應用場景
- (1)從業務系統到數據分析
- (2)傳統企業BI應用
- (3)探索式分析
- (4)商業智能分析
- (5)線上線下混合運用
一、大數據基礎知識小結
(1)數據分析
數據分析是基于商業目的,有目的的進行收集、整理、加工和分析數據,提煉有價值信息的過程。數據分析通俗的說就是對收集起來的大量數據進行分析,提取有用的信息。
- 數據分析流程:
需求分析 明確目標 --》 數據收集 加工處理 --》數據分析 數據展現 --》分析報告 提煉價值
(2)數據倉庫系統
分析的前提是要有相應的數據,大量的業務數據聚集在一起,就產生了一種新的概念:數據倉庫
數據倉庫是一個面向主題的、集成的、非易失的、時變的數據集合,用于支持管理決策。
比如說一個電商系統,他的數據可以劃分為客戶主題、產品主題、訂購主題、物流主題的相關數據。一個數據倉庫的數據源可以來自于不同的業務系統,集成到同一個數據倉庫中。數據到達數據倉庫之后,會對外進行相關的查詢,很少做相關的修改。同時數倉中的數據會隨著時間而不停地變化。
- 基于數據倉庫的數據分析流程:
分析需求–》 確認數據源–》 ETL處理 --》匯總/整合 --》 數據建模 --》 分析展現
(3)數據倉庫解決的問題
- 為業務部門提供準確及時的業務報表:多個業務平臺捕獲數據整合
- 為管理人員提供更強的分析能力
- 為數據挖掘和知識發現奠定基礎:通過數據分析,利用數據挖掘的技術找到數據發展的模式與規律,可以使預測分析的結果更準確完整。
(4)大數據的理解
大數據指在可承受的時間范圍內用常用的軟件工具進行捕捉、管理和處理的數據集合,是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。
大數據的特點:
- 體量巨大 體量達到 pb tb級別
- 種類繁多 數據來源于多個數據源,格式也可能是涵蓋了音頻、視頻、文本等格式
- 價值密度低
- 處理速度快 涉及相關的實時性處理
大數據的理解:
- 不能盲目追求體量
- 不能盲目追求數量
- 不能盲目追求技術
- 不能盲目追求潮流
大數據的處理思路:
- 減治:將問題簡化成一個更簡單的能處理的問題
- 分治:將問題分成多個可以簡單求解的小問題
– 復雜的問題簡單化,復雜的問題拆分化,再重復減化。
二、阿里云大數據產品體系
(1)產品體系概況:
(2)阿里云數加平臺定位:
一站式數據平臺、提供三層服務(數加平臺內底層數加平臺提供基礎計算服務:離線計算、流計算、分析型數據庫等,同時提供數據平臺分析工具,最上層數加平臺提供應用級別的服務,包括規則引擎、畫像分析、智能推薦) 、定制化行業解決方案。
(3)阿里云大數據基礎產品:
- 云數據庫 ApsaraDB for RDS (簡稱RDS):穩定可靠地伸縮性在線數據庫服務、兼容 Mysql 、SQL server、PG等,只需在選擇數據庫時選擇對應的數據庫類型和版本。
- 表格存儲 TS:構建在阿里云飛天分布式系統之上的NoSQL數據存儲服務。
- 分析型數據庫 Analytic DB:海量數據實時高并發在線分析云計算服務。
- 大數據計算服務 MaxCompute 原名ODPS:針對 TB/PB級、實時性要求不高的分布式處理能力,用于大數據運算能力相關的服務,開箱即用。
- 數據集成 Data Integration:阿里云對外提供的穩定高效、彈性伸縮的數據同步平臺,為阿里云大數據計算引擎提供離線(批量)數據進出通道。
- 對象存儲服務 Object Storage Service(OSS):海量、安全、低成本、高可用的云存儲服務。即開即用,無限大空間的存儲集群。
(4)阿里云數加平臺:
- 大數據開發平臺 DataWorks(原名Data IDE):數據工場DataWorks是基于MaxCompute作為計算和存儲引擎的用于工作流可視化開發和托管調度運維的海量數據離線加工分析平臺。具有托管和調度的能力。
- Quick BI :海量數據實時在線分析服務。
- 阿里云機器學習PAI:基于MaxCompute、GPU集群,支持MR、MPI、SQL、Spark。
- DataV:大屏開發平臺。
三、大數據產品典型應用場景
(1)從業務系統到數據分析
(2)傳統企業BI應用
(3)探索式分析
(4)商業智能分析
(5)線上線下混合運用
總結
以上是生活随笔為你收集整理的【ACP】阿里云ACP吐血汇总(一)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 阿里巴巴副总裁肖力:云原生安全下看企业新
- 下一篇: 虚拟机Vmware玩游戏运行卡顿还有慢的