日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

全民大数据时代已来 阿里数加平台详解

發布時間:2025/5/22 编程问答 66 豆豆
生活随笔 收集整理的這篇文章主要介紹了 全民大数据时代已来 阿里数加平台详解 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
文章講的是全民大數據時代已來 阿里數加平臺詳解,業界流行一種說法,云計算與大數據就是一枚硬幣的兩面,相生相惜,不可分割。在當下互聯網時代,數據的價值越來越受到社會的認可,并在今天,已然成為一種普惠資源,像水、電、能源一樣支持社會發展。今天,2016年的阿里云棲大會首站在上海拉開帷幕,作為本場大會的重磅新聞,阿里云全球首發了可以提供一站式大數據處理能力的平臺——“數加”,并全新亮相了20款新產品,通過阿里云開放出來,讓“普惠大數據”成為可能。

  

  DT時代 如何讓數據從成本中心走向價值中心

  據IDC出版的數字世界研究報告顯示,2013年人類產生、復制和消費的數據量達到4.4ZB。而到2020年,數據量將增長10倍,達到44ZB。大數據已經成為當下人類最寶貴的財富。但全球真正享受大數據紅利的公司不足千分之一,人類已挖掘的數據財富更是不到百萬分之一。

  如何打破傳統3個月刪除存儲空間以節約成本的固有規則,讓數據真正通過計算產生價值?

  隨著大數據的蓬勃發展,數據計算性能的提升,使得數據從成本中心走向價值中心成為可能,而阿里此次發布的“數加平臺”就恰恰是將這種能力賦予普通企業甚至個人的途徑之一。作為數加平臺的發布嘉賓,阿里云大數據事業部資深總監徐長亮介紹,經過7年的雙11洗禮,原來的阿里大數據產品ODPS今天正式更名為“數加大數據平臺”并通過阿里云向外界開放,提供普惠大數據服務。“我們已經預先走過了很多坑,相信可以為更多企業與個人提供高效、穩定的數據計算服務。是大數據計算變成普惠能力,將更有助于幫助大家發現數據背后的價值,我們在金融領域的試用僅是開始,未來所有的聲音都將是圍繞數據展開。”

  

  

  毫無疑問,借助大數據技術,阿里巴巴取得了巨大的商業成功。通過對電子商務平臺上的客戶行為進行分析,誕生了螞蟻小貸、花唄、借唄;菜鳥網絡通過電子面單、物流云、菜鳥天地等數據產品,為快遞行業的升級提供技術方法。 在這些創新中,“數加”承載了阿里巴巴EB級別的數據加工計算,經歷了上萬名工程師的實戰檢驗。據介紹,大麥網是阿里云“數加”平臺的首批嘗鮮者。通過采用“數加”的推薦引擎,大麥網的研發成本從900人天降低到了30人天,效率提升了30倍。

  另外,在輸出自身大數據能力的同時,徐長亮介紹“數加”還向有數據開發能力的團隊開放。這些團隊可入駐“數加”,借助數加上的工具為各行各業提供數據服務。“這就像在淘寶開店一樣,只是他們售賣的是專業能力。”徐常亮表示,阿里云計劃用3年時間吸引1000家合作伙伴入駐,共同分享1萬億的大數據蛋糕。

  20款全新產品為“數加平臺”增效賦能

  在過去的5年里,全球大數據計算性能實現了超過20倍的增長,100TB數據排序時間由8274秒縮短到377秒。“很顯然,束縛大數據的技術瓶頸已經被完全打破,數據將從企業的成本中心轉變為價值中心,2016年我們將迎來大數據應用的全面落地。”徐常亮說,通過數加平臺,我們希望所有企業都能像阿里巴巴一樣更高效的使用大數據。

  此次,“數加”平臺首批集中發布了20款產品,覆蓋數據采集、計算引擎、數據加工、數據分析、機器學習、數據應用等數據生產全鏈條。“這些技術至少領先業界三年”,徐常亮說。

  大數據計算服務(MaxCompute)、分析型數據庫(Analytic DB)、流計算(StreamCompute)共同組成了底層強大的計算引擎,速度更快,成本更低。經測算,自建Hadoop集群的成本是數加的1.5倍,國外計算廠商AWS 的EMR成本更是數加的5倍。

  

  

  

  具體說來包括:

  1、大數據計算服務可6小時處理100PB數據,相當于1億部高清電影。單集群規模過萬臺,并支持多集群聯合計算。做到了速度更快,成本更低。

  經測算,自建Hadoop集群的成本是數加的1.5倍,國外計算廠商AWS 的EMR成本更是數加的5倍。阿里云當天還宣布,大數據計算服務再降價50%。

  2、分析型數據庫可實現對數據的實時多維分析,百億量級多維查詢只需100毫秒。

  3、流計算擅長對實時流式數據進行分析,具有低延時、高性能的特點。每秒查詢率可以達到千萬級,日均處理萬億條消息、PB量級的數據。

  計算引擎之上,“數加”提供了最豐富的云端數據開發套件,開發者可一站式完成數據加工。這些產品包含:數據集成、數據開發、調度系統、數據管理、運維視屏、數據質量、任務監控。

  整體來看,大數據開發套件的優勢包括:支持100人以上協同設計、開發、運維;具有良好的擴展性;提供各個產品功能模塊的Open API,可二次開發;多個數據實例之間的數據授權機制,確保數據只能使用卻不可見;提供白屏化的運維能力,以及字段級數據質量監控、機器預警、資源使用率監控等功能,讓用戶更好的掌控自己的數據及數據任務。

  另外,計算引擎之上,“數加”提供了最豐富的云端數據開發套件,包括數據集成、數據開發、調度系統、數據管理、運維視屏、數據質量、任務監控。

  徐長亮介紹,在數據分析方面,通過移動數據分析(Mobile Analytics)產品,開發者可快速搭建日志采集、分析系統;通過數加BI報表產品,3分鐘即可完成海量數據的分析報告;通過數據可視化產品DataV,一星期就能做出雙11同款大屏。

  在數據分析方面,數加提供了3款產品供開發者使用:

  1、 通過移動數據分析產品,開發者可快速搭建日志采集、分析系統,從而為用戶提供個性化服務;

  2、 通過數加BI報表產品,3分鐘即可完成海量數據的分析報告。產品支持多種云數據源,提供近20種可視化效果。

  3、 通過數據可視化產品DataV,一星期就能做出雙11同款大屏。這款產品,曾支持了阿里巴巴多年的雙11、雙12作戰指揮。

  

  這一平臺承載了阿里云“普惠大數據”的理想,即讓全球任何一個企業、個人都能用上大數據。

  同時,基于DataV,數加還發布了面向政府的行業應用產品“郡縣圖治”。通過這款產品,縣長可以在一個屏幕下統覽全縣各項經濟民生數據,為政府決策提供輔助。

  對于時下大熱的機器學習,數加更是提供了全面支持。“數加”發布的機器學習工具,可基于海量數據實現對用戶行為、行業走勢、天氣、交通等的預測。圖形化編程讓用戶無需編碼、只需用鼠標拖拽標準化組件即可完成開發。產品還集成了阿里巴巴核心算法庫,包括特征工程、大規模機器學習、深度學習等。

  為了能夠幫助開發者更快捷在應用中集成大數據功能,“數加”同時提供了規則引擎、推薦引擎、文字識別、智能語音交互等數據應用產品。

  行業的健康發展,自律很重要。徐常亮強調,數據是客戶的寶貴資產,任何云計算平臺都不能移作它用。阿里云將嚴格遵守去年7月份發起的《數據保護倡議書》,也希望全行業能夠自律,共同迎接大數據產業的爆發。

  


作者:張苗苗 來源:IT168 原文鏈接:全民大數據時代已來 阿里數加平臺詳解 《新程序員》:云原生和全面數字化實踐50位技術專家共同創作,文字、視頻、音頻交互閱讀

總結

以上是生活随笔為你收集整理的全民大数据时代已来 阿里数加平台详解的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。