告警解釋

系統每30秒周期性檢測Yarn ResourceManager堆內存使用率，并把實際的Yarn ResourceManager堆內存使用率和閾值相比較。當Yarn ResourceManager堆內存使用率超出閾值（默認為最大堆內存的95%）時產生該告警。

用戶可通過“運維 > 告警 > 閾值設置 > 待操作集群的名稱 > Yarn”修改閾值。

平滑次數為1，Yarn ResourceManager堆內存使用率小于或等于閾值時，告警恢復；平滑次數大于1，Yarn ResourceManager堆內存使用率小于或等于閾值的95%時，告警恢復。

告警屬性

告警參數

對系統的影響

Yarn ResourceManager堆內存使用率過高，會影響Yarn任務提交和運行的性能，甚至造成內存溢出導致Yarn服務不可用。

可能原因

該節點Yarn ResourceManager實例堆內存使用量過大，或分配的堆內存不合理，導致使用量超過閾值。

處理步驟

檢查堆內存使用量

1.在FusionInsight Manager界面，選擇“運維 > 告警 > 告警 > Yarn ResourceManager堆內存使用率超過閾值 > 定位信息”。查看告警上報的實例的主機名。

2.在FusionInsight Manager界面，選擇“集群 > 待操作集群的名稱 > 服務 > Yarn > 實例 > ResourceManager（對應上報告警實例主機名）”，單擊圖表區域右上角的下拉菜單，選擇“定制 > 資源”，勾選“ResourceManager內存使用率”。查看堆內存使用情況。

3.查看ResourceManager使用的堆內存是否已達到ResourceManager設定的最大堆內存的95%。

• 是，執行步驟4。
• 否，執行步驟6。

4.在FusionInsight Manager界面，選擇“集群 > 待操作集群的名稱 > 服務 > Yarn > 配置 > 全部配置 > ResourceManager > 系統”。將“GC_OPTS”參數根據實際情況調大，并單擊“保存”，保存完成后重啟角色實例。

                
說明
                
集群中的NodeManager實例數量和ResourceManager內存大小的對應關系參考如下：
集群中的NodeManager實例數據達到100，ResourceManager實例的JVM參數建議配置為：-Xms4G -Xmx4G-XX:NewSize=512M -XX:MaxNewSize=1G。
集群中的NodeManager實例數據達到200，ResourceManager實例的JVM參數建議配置為：-Xms6G -Xmx6G-XX:NewSize=512M -XX:MaxNewSize=1G。
集群中的NodeManager實例數據達到500，ResourceManager實例的JVM參數建議配置為：-Xms10G -Xmx10G -XX:NewSize=1G-XX:MaxNewSize=2G。
集群中的NodeManager實例數據達到1000，ResourceManager實例的JVM參數建議配置為：-Xms20G -Xmx20G-XX:NewSize=1G -XX:MaxNewSize=2G。
集群中的NodeManager實例數據達到2000，ResourceManager實例的JVM參數建議配置為：-Xms40G -Xmx40G-XX:NewSize=2G -XX:MaxNewSize=4G。
集群中的NodeManager實例數據達到3000，ResourceManager實例的JVM參數建議配置為：-Xms60G -Xmx60G-XX:NewSize=2G -XX:MaxNewSize=4G。
集群中的NodeManager實例數據達到4000，ResourceManager實例的JVM參數建議配置為：-Xms80G -Xmx80G-XX:NewSize=2G -XX:MaxNewSize=4G。
集群中的NodeManager實例數據達到5000，ResourceManager實例的JVM參數建議配置為：-Xms100G -Xmx100G-XX:NewSize=3G -XX:MaxNewSize=6G。
              

5.觀察界面告警是否清除。

• 是，處理完畢。
• 否，執行步驟6。

收集故障信息

6.在FusionInsight Manager界面，選擇“運維 > 日志 > 下載”。

7.在“服務”中勾選待操作集群的如下節點信息。

• NodeAgent
• Yarn

8.單擊右上角的設置日志收集的“開始時間”和“結束時間”分別為告警產生時間的前后10分鐘，單擊“下載”。

9.請聯系運維人員，并發送已收集的故障日志信息。

告警清除

此告警修復后，系統會自動清除此告警，無需手工清除。

參考信息

無。