當前位置:
首頁 >
Hadoop记录-监控几个思路
發布時間:2025/4/16
33
豆豆
生活随笔
收集整理的這篇文章主要介紹了
Hadoop记录-监控几个思路
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
1.存活監控
基本監控,主要對進程的存活、端口連通性、url可檢測性等指標進行監控。
2.2 可用性監控
主要指對用戶而言是否可用,能否返回預期結果,通常部署在一些業務主流程或一些關鍵環節,如接口調用,平臺讀寫操作,端到端訪問等。
2.3 性能指標
性能指標指可能影響業務正常運行的重要指標,一般偏離正常范圍需人工干預,如io、cpu、rpc/handler tps,queue、連接數等。
2.4 容量指標
與資源相關,能直接推導資源用量的指標,該類指標異常可能觸發擴容需求,如hdfs使用率、hbase tps、es qps/iops等。
2.5 監控對象&指標
對象主要指被監控的組件,如hbase,jstorm,指標指具體的監控項,如hbase的tps,rs count,region count,es的iops、tps、qps等。
2.6 監控頻率
?? 間隔多長時間上報一次。
2.7 告警方式
? 是否短信告警,是否郵件告警,是否豐聲通知。
2.8 調用量監控
主要針對接口調用次數、頻率進行監控,如平臺接口(USS接口)、平臺應用接口(ubas)等。
2.9 日志監控
針對異常比較頻繁,問題比較突出的應用場景,如YARN、dataIDE、調度等底層日志異常進行收集、監控。
注:各類指標可能會存在重合,但使有場景權重不一樣,建議按以上分類配置,可以重復。
轉載于:https://www.cnblogs.com/xinfang520/p/10452556.html
總結
以上是生活随笔為你收集整理的Hadoop记录-监控几个思路的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 迁移学习理解
- 下一篇: 欧拉(线性)筛 Miller_Rabi