前言

隨著大數(shù)據(jù)的快速發(fā)展，行業(yè)大數(shù)據(jù)服務越來越重要。同時，對大數(shù)據(jù)實時計算的要求也越來越高。今天會和大家分享下愛奇藝基于Apache Flink的實時計算平臺建設實踐。

今天的介紹會圍繞下面三點展開：

• Flink的現(xiàn)狀與改進

• 平臺化的探索和實踐：實時計算平臺

• Flink業(yè)務案例

01Flink的現(xiàn)狀與改進

1. Flink現(xiàn)狀

首先和大家分享下愛奇藝大數(shù)據(jù)服務的發(fā)展史。

 

• 2012年搭建了第一個Hadoop集群，當時只有大概20幾個節(jié)點，使用的計算框架是MapReduce和Hive等

• 到2013，2014年，開始使用Hadoop 2.0，上線了Storm和Spark，由于Storm的使用性和穩(wěn)定性不夠好，被放棄使用，轉(zhuǎn)而使用Spark

• 2015年發(fā)布了第一個實時計算平臺Europa，上線了Kafka

• 2017年使用了Flink，同時我們基于Spark和Flink打造了流式計算引擎St

總結

以上是生活随笔為你收集整理的Flink从入门到精通100篇（二十三）-基于Apache Flink的爱奇艺实时计算平台建设实践的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。