日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

如何进行生产环境作业监控

發布時間:2024/3/12 编程问答 27 豆豆
生活随笔 收集整理的這篇文章主要介紹了 如何进行生产环境作业监控 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

聲明:本系列博客為原創,最先發表在拉勾教育,其中一部分為免費閱讀部分。被讀者各種搬運至各大網站。所有其他的來源均為抄襲。

《2021年最新版大數據面試題全面開啟更新》

     之前我們介紹如何發現Flink任務是否出現反壓,Flink后臺頁面是發現問題的第一選擇,后臺頁面可以直觀、清晰地看到當前作業的運行狀態。
     在實際生產中,Flink的后臺頁面可以方便對Flink JobManager、TaskManager、執行計劃、Slot分配、是否反壓等參數進行定位,對單個任務來講可以方便地進行問題排查。
     但是對很多中大型企業來講,對集群的作業進行管理時,更多的是關心作業精細化實施運行狀態。例如,實時吞吐的同比環比、整個集群的任務運行概覽、集群水位,或者監控利用Flink實現的ETL框架的運行情況等,這時候需要設計專門的監控系統來監控集群的任務作業情況。

     針對上面的情況,可以使用Flink提供的另一個強大的功能:Flink Metrics。
     Flink Metrics是Flink實現的一套運行信息收集庫,不但可以手機Flink本身提供的系統指標,比如CPU、內存、線程使用情況、JVM垃圾收集情況、網絡和IO等,還可以通過繼承和實現指定類或者接口打點手機用戶自定義的指標。
     使用Flink Metrics可以做到:

  • 實時采集Flink中的Metrics信息或者自定義用戶需要的指標信息并進行展示;
  • 通過Flink提供的Rest API收集這些信息&

總結

以上是生活随笔為你收集整理的如何进行生产环境作业监控的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。