日前，全球權(quán)威咨詢與服務(wù)機(jī)構(gòu)Forrester發(fā)布了《The Forrester WaveTM: Cloud Data Warehouse, Q4 2018》報(bào)告。這是Forrester Wave首次發(fā)布關(guān)于云數(shù)倉(cāng)解決方案（Cloud Data Warehouse，簡(jiǎn)稱CDW）的測(cè)評(píng)。報(bào)告對(duì)云數(shù)倉(cāng)的當(dāng)前產(chǎn)品功能、產(chǎn)品路線和發(fā)展策略、市場(chǎng)表現(xiàn)等幾個(gè)方面進(jìn)行全面的評(píng)估，在產(chǎn)品能力排行榜中，阿里云力壓微軟排行第7。

Forrester測(cè)評(píng)報(bào)告對(duì)CDW核心功能的評(píng)估主要從解決方案的多樣性、數(shù)據(jù)集成、性能和彈性擴(kuò)展、安全性等方面進(jìn)行，Forrester給出的評(píng)價(jià)是：阿里云（MaxCompute+DataWorks+ADB）在廣泛的基礎(chǔ)設(shè)施之上提供了一個(gè)可靠的數(shù)據(jù)分析平臺(tái)，能夠滿足客戶實(shí)時(shí)和EB規(guī)模的數(shù)據(jù)處理需求。此前媒體已經(jīng)報(bào)道了DataWorks的相關(guān)細(xì)節(jié)，今天我們就來(lái)聊聊MaxCompute。

EB級(jí)數(shù)據(jù)處理能力

首先來(lái)看一組數(shù)據(jù)。

2018年雙11，MaxCompute單日數(shù)據(jù)處理超過(guò)600PB，平穩(wěn)支撐電商混布單元在線流量洪峰12萬(wàn)筆/s交易，穩(wěn)定承載45%導(dǎo)購(gòu)流量，為雙11交易峰值提供了有力保障和平滑支撐。

根據(jù)官方介紹，MaxCompute是一種快速、完全托管的數(shù)據(jù)倉(cāng)庫(kù)解決方案，通俗地理解就是大型分布式數(shù)據(jù)計(jì)算，所以大規(guī)模計(jì)算是最基礎(chǔ)的能力。MaxCompute已經(jīng)是阿里巴巴的主力計(jì)算平臺(tái)，支持了整個(gè)阿里巴巴集團(tuán)內(nèi)部99%的大數(shù)據(jù)存儲(chǔ)和95%的計(jì)算，數(shù)據(jù)規(guī)模已達(dá)到EB級(jí)，上文提到的雙11場(chǎng)景就很好地體現(xiàn)了規(guī)模這能力。

當(dāng)然，它和傳統(tǒng)?Hadoop 相比還有其它的優(yōu)勢(shì)。MaxCompute 向用戶提供了完善的數(shù)據(jù)導(dǎo)入方案以及多種經(jīng)典的分布式計(jì)算模型，能夠更快速的解決用戶海量數(shù)據(jù)計(jì)算問(wèn)題，有效降低企業(yè)成本，并保障數(shù)據(jù)安全。

整體來(lái)說(shuō)有如下特點(diǎn)：

?●??MaxCompute在計(jì)算引擎、分布式存儲(chǔ)上做了優(yōu)化，在Sort Benchmark中MaxCompute消耗的時(shí)間和成本都是最低，保證了最優(yōu)性價(jià)比。

?●??服務(wù)器資源、集群規(guī)模都是動(dòng)態(tài)的彈性拓展，無(wú)需用戶關(guān)心。

?●??支持SQL、MR、迭代計(jì)算、內(nèi)存計(jì)算、圖計(jì)算等計(jì)算模型。

經(jīng)歷了大規(guī)模應(yīng)用實(shí)踐

據(jù)了解，目前MaxCompute正在為全球企業(yè)提供大數(shù)據(jù)計(jì)算能力。阿里巴巴通用計(jì)算平臺(tái)負(fù)責(zé)人關(guān)濤曾表示，“在公共云上，MaxCompute每年以250%的用戶量和計(jì)算量在增長(zhǎng)，并在全球十幾個(gè)國(guó)家和地區(qū)部署服務(wù)，為當(dāng)?shù)仄髽I(yè)提供計(jì)算力。”

例如，城市大腦的底層就在使用MaxCompute做存儲(chǔ)和大數(shù)據(jù)計(jì)算，支持了杭州、澳門、吉隆坡等城市進(jìn)行智能化升級(jí)。這其中，由MaxCompute、PAI、流計(jì)算服務(wù)組成的計(jì)算平臺(tái)發(fā)揮了巨大的價(jià)值。

不僅如此，MaxCompute在各大行業(yè)已經(jīng)有廣泛應(yīng)用：

天氣預(yù)測(cè)有著廣泛的需求群體，每天幾億次的天氣查詢需求和近幾十億次的廣告請(qǐng)求，?MaxCompute則很好地應(yīng)對(duì)了這一挑戰(zhàn)。MaxCompute幫助墨跡天氣實(shí)現(xiàn)了對(duì)每天上億用戶的天氣查詢需求的快速響應(yīng)和幾十億次廣告請(qǐng)求的精準(zhǔn)投放。?互聯(lián)網(wǎng)保險(xiǎn)行業(yè)，MaxCompute幫助眾安實(shí)現(xiàn)精準(zhǔn)的用戶畫(huà)像分析，助力企業(yè)為數(shù)億用戶提供數(shù)十億的保單服務(wù)，提升企業(yè)效率的同時(shí)，為億萬(wàn)用戶送去健康與安全。

總而言之，只要有海量數(shù)據(jù)處理需求的場(chǎng)景，MaxCompute都能通過(guò)阿里云為用戶提供快速、穩(wěn)定的計(jì)算能力。

結(jié)語(yǔ)

從Forrester的本次研究報(bào)告可以看出，大數(shù)據(jù)技術(shù)已經(jīng)進(jìn)入CDW階段，在廣泛的基礎(chǔ)設(shè)施之上提供一個(gè)可靠的數(shù)據(jù)分析平臺(tái)，滿足客戶實(shí)時(shí)和大規(guī)模數(shù)據(jù)計(jì)算成為核心需求。

MaxCompute作為大數(shù)據(jù)計(jì)算平臺(tái)，不只是單一引擎，更是面向企業(yè)的完整服務(wù)。在過(guò)去10年中，MaxCompute穩(wěn)定支撐阿里集團(tuán)所有數(shù)據(jù)業(yè)務(wù)的同時(shí)，早已將強(qiáng)大的數(shù)據(jù)能力普惠給廣泛的云上企業(yè)。基于MaxCompute構(gòu)建穩(wěn)定、安全、可擴(kuò)展及與應(yīng)用系統(tǒng)高效交互的數(shù)據(jù)中臺(tái)，已成為眾多行業(yè)下客戶數(shù)字轉(zhuǎn)型的首選方案。

?

原文鏈接
本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。

總結(jié)

以上是生活随笔為你收集整理的揭秘阿里云EB级大数据计算引擎MaxCompute的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。