作者：不周 關鍵詞：Kafka ETL，高彈性、免運維、低成本

阿里云消息隊列 Kafka 版提供兼容 Apache Kafka 生態的全托管服務，徹底解決開源產品長期的痛點，是大數據生態中不可或缺的產品之一。隨著 Kafka 越來越流行，最初只是作為簡單的消息總線，后來逐漸成為數據集成系統，Kafka 可靠的傳遞能力讓它成為流式處理系統完美的數據來源。在大數據工程領域，Kafka 在承接上下游、串聯數據流管道方面發揮了重要作用，Kafka 應用流式框架處理消息也逐漸成為趨勢。

說到流計算，常用的便是 Storm、Spark Streaming、Flink 和 Kafka Streams，目前這些框架都相對成熟，并且都有相應的使用案例，但這些框架使用起來門檻較高，首先要學習框架和各種技術、規范的使用，然后要將業務遷移到這些框架中，最后線上使用并運維這些流計算框架。尤其在面對 70% 以上簡單流處理場景的需求，傳統方案的弊端會被不斷放大，客戶仍然需要投入較大的人力成本和較高的資源，同時整個架構也比較復雜。總結來說，主要遇到的問題包含以下四個方面：

一是運維成本較高，研發團隊自行編寫代碼，后期需要持續維護，會帶來較大的運維成本； 二是技術成本較大，對于很多輕量或簡單計算需求，需要進行技術選型，而引入一個全新的組件會帶來較高的技術成本； 三是學習成本不可預期，在某組件選定后，需要研發團隊進行學習并持續維護，這就帶來了不可預期的學習成本； 四是開發人員自行選用開源組件之后，可靠性和可用性并不能得到很好的保障。

為了更好的解決傳統流式計算在面對簡單流處理場景需求時遇到的種種問題，阿里云消息隊列 Kafka 版也推出了相應的解決方案：Kafka ETL。

那么阿里云 Kafka ETL 具體是如何解決以上問題的呢？

2 月 18 日下午 14:00，云計算情報局直播間將為您答疑解惑。

點擊此處，立即前往云計算情報局直播間！

發布云原生技術最新資訊、匯集云原生技術最全內容，定期舉辦云原生活動、直播，阿里產品及用戶最佳實踐發布。與你并肩探索云原生技術點滴，分享你需要的云原生內容。

關注【阿里巴巴云原生】公眾號，獲取更多云原生實時資訊！

總結

以上是生活随笔為你收集整理的云计算情报局预告｜告别 Kafka Streams，让轻量级流处理更加简单的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。