告警解釋
告警模塊按60秒周期檢測Mapreduce服務狀態。當檢測到Mapreduce服務不可用時產生該告警。
Mapreduce服務恢復時,告警恢復。
告警屬性
| 告警ID | 告警級別 | 是否自動清除 |
|---|---|---|
| 18021 | 緊急 | 是 |
告警參數
| 參數名稱 | 參數含義 |
|---|---|
| 來源 | 產生告警的集群名稱。 |
| 服務名 | 產生告警的服務名稱。 |
| 角色名 | 產生告警的角色名稱。 |
| 主機名 | 產生告警的主機名。 |
對系統的影響
集群無法提供Mapreduce服務,如無法通過Mapreduce查看任務日志,無法提供Mapreduce服務的日志歸檔功能等。
可能原因
- JobHistoryServer實例異常。
- KrbServer服務異常。
- ZooKeeper服務異常。
- HDFS服務異常。
- Yarn服務異常。
處理步驟
檢查Mapreduce服務JobHistoryServer實例狀態
1.在FusionInsight Manager界面,選擇“集群 > 待操作集群的名稱 > 服務 > Mapreduce > 實例”。
2.查看JobHistoryServer的“運行狀態”,檢查JobHistoryServer是否處于良好狀態。
- 是,執行步驟11。
- 否,執行步驟3。
檢查KrbServer服務狀態
3.在FusionInsight Manager的告警列表中,查看是否有“ALM-25500 KrbServer服務不可用”告警產生。
- 是,執行步驟4。
- 否,執行步驟5。
4.參考“ALM-25500 KrbServer服務不可用”的處理步驟處理故障后,檢查本告警是否恢復。
- 是,處理完畢。
- 否,執行步驟5。
檢查Zookeeper服務狀態
5.在FusionInsight Manager的告警列表中,查看是否有“ALM-13000 ZooKeeper服務不可用”告警產生。
- 是,執行步驟6。
- 否,執行步驟7。
6.參考“ALM-13000 ZooKeeper服務不可用”的處理步驟處理故障后,檢查本告警是否恢復。
- 是,處理完畢。
- 否,執行步驟7。
檢查HDFS服務狀態
7.在FusionInsight Manager的告警列表中,查看是否有“ALM-14000 HDFS服務不可用”告警產生。
- 是,執行步驟8。
- 否,執行步驟9。
8.參考“ALM-14000 HDFS服務不可用”的處理步驟處理故障后,檢查本告警是否恢復。
- 是,處理完畢。
- 否,執行步驟9。
檢查Yarn服務狀態
9.在FusionInsight Manager的告警列表中,查看是否有“ALM-18000 Yarn服務不可用”告警產生。
- 是,執行步驟10。
- 否,執行步驟11。
10.參考“ALM-18000 Yarn服務不可用”的處理步驟處理故障后,檢查本告警是否恢復。
- 是,處理完畢。
- 否,執行步驟11。
收集故障信息
11.在主集群的FusionInsight Manager界面,選擇“運維 > 日志 > 下載”。
12.在“服務”中勾選待操作集群的“Mapreduce”。
13.單擊右上角的
設置日志收集的“開始時間”和“結束時間”分別為告警產生時間的前后10分鐘,單擊“下載”。
14.請聯系運維人員,并發送已收集的故障日志信息。
告警清除
此告警修復后,系統會自動清除此告警,無需手工清除。
參考信息
無。