前言

本文講述 Flink 在 Shopee 新加坡數據組 ( Shopee Singapore Data Team ) 的應用實踐，主要內容包括：

• 實時數倉建設背景

• Flink 在實時數據數倉建設中結合 Druid、Hive 的應用場景

• 實時任務監控

• Streaming SQL 平臺化

• Streaming Job 管理

 

 

建設背景

 

Shopee 是東南亞與臺灣領航電商平臺，覆蓋新加坡、馬來西亞、菲律賓、臺灣、印度尼西亞、泰國及越南七大市場，同時在中國深圳、上海和香港設立跨境業務辦公室。

 

• Shopee 在2020年第一季的總訂單量高達4.298億，同比增長111.2%。

• 根據 App Annie， Shopee 在2020年第一季強勢躋身全球購物類 App 下載量前三名。

• 同時斬獲東南亞及臺灣市場購物類 App 年度總下載量、平均月活數、安卓使用總時長三項冠軍，并領跑東南亞兩大頭部市場，拿下印尼及越南年度購物類 App 下月活量雙冠王。

 

其中包括訂單商品、物流，支付，數字產品等各方面的業務。為了支持這些互聯網化產品，應對越來的越多的業務挑戰，于是我們進行了數據倉庫的設計和架構建設。

 

 數據倉庫挑戰

 

當前隨著業務發展，數據規模的膨脹和商務智能團隊對實時需求的不斷增長，業務挑戰越來越大：

 </

總結

以上是生活随笔為你收集整理的Flink从入门到精通100篇（二十）-跨境电商 Shopee 的实时数仓之路的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。