一、概述

1、什么是Presto

2012年，FaceBook團隊為交互式查詢分析設計了Presto，可快速處理PB級別數(shù)據(jù)。

• Apache Presto是分布式并行查詢執(zhí)行引擎，針對低延遲和交互式查詢分析進行了優(yōu)化。Presto可以輕松運行查詢并且無需停機即可擴展，甚至可以從GB級別擴展至PB級別。
• 單個Presto查詢可以處理來自多個來源的數(shù)據(jù)，如HDFS、MySql、Cassandra、Hive等。
• Presto使用Java構建。存在一個對Hadoop友好的連接器架構，允許輕松插入文件系統(tǒng)。
• Presto支持標準的ANSI SQL（美國國家標準化組織）。

2、Presto架構

• 采用了經(jīng)典MPP（大規(guī)模并行處理）的DBMS（數(shù)據(jù)庫管理系統(tǒng)）架構。
  
  
  
• 如下，Presto各個組件描述。
  

工作流程

• Presto客戶端（CLI）將SQL語句提交給住守護進程協(xié)調(diào)器。
• 調(diào)度器通過執(zhí)行pipline連接。
  • 調(diào)度程序?qū)⒐ぷ鞣峙浣o最接近數(shù)據(jù)的節(jié)點并監(jiān)控進度；
  • 協(xié)調(diào)器將任務分配給多個工作節(jié)點，最后工作節(jié)點將結果返回給客戶端；
  • 客戶端從輸出過程中提取數(shù)據(jù)。
• 所有處理都在內(nèi)存中，并通過網(wǎng)絡在不同階段之間進行流水線處理，避免了不必要的I/O延遲開銷。

總結

以上是生活随笔為你收集整理的大数据 ＞＞ Presto ＞＞ 基础的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。