告警解釋
系統每30秒周期性檢測每個HBase服務實例中每個RegionServer的Region數。該指標可以在HBase服務監控界面和RegionServer角色監控界面查看，當檢測到某個RegionServer上的Region數超出閾值（默認連續20次超過默認閾值2000）時產生該告警。用戶可通過“運維 > 告警 > 閾值設置> 服務 > HBase”修改閾值。當Region數小于或等于閾值時，告警消除。
說明若集群啟用了多實例功能且安裝了多個HBase服務，請根據“定位信息”的“服務名”值來確定具體產生告警的HBase服務。例如HBase1服務不可用，則“定位信息”中顯示服務名=HBase1，處理步驟中的操作對象也應由HBase調整為HBase1。
告警屬性
| 告警ID | 告警級別 | 是否自動清除 |
|---|---|---|
| 19011 | 重要 | 是 |
告警參數
| 參數名稱 | 參數含義 |
|---|---|
| 來源 | 產生告警的集群名稱。 |
| 服務名 | 產生告警的服務名稱。 |
| 角色名 | 產生告警的角色名稱。 |
| 主機名 | 產生告警的主機名。 |
對系統的影響
RegionServer的Region數超出閾值，會影響HBase的數據讀寫性能。
可能原因
- RegionServer的Region分布不均衡。
- HBase集群規模過小。
處理步驟
查看告警定位信息
1.在FusionInsight Manager首頁，選擇“運維 > 告警 > 告警”，選中“告警ID”為“19011”的告警，查看“定位信息”中產生該告警的服務實例和主機名。
2.在FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務 > HBase”，單擊“HMaster(主)”，打開該HBase實例的WebUI，查看RegionServer上Region分布是否均衡。
說明admin用戶默認不具備其他組件的管理權限，如果訪問組件原生界面時出現因權限不足而打不開頁面或內容顯示不全時，可手動創建具備對應組件管理權限的用戶進行登錄。
是，執行步驟9。
否，執行步驟3。
詳見下圖：HBase的WebUI
負載均衡
3.以root用戶登錄HBase客戶端所在節點。進入客戶端安裝目錄，設置環境變量：
cd 客戶端安裝目錄
source bigdata_env
如果集群采用安全版本，要進行安全認證。執行kinit hbase命令，按提示輸入密碼（向管理員獲取密碼）。
4.執行以下命令進入hbase shell，查看目前負載均衡功能是否打開：
hbase shell
balancer_enabled
- 是，執行步驟6。
- 否，執行步驟5。
5.在hbase shell，中執行命令打開負載均衡功能，并執行命令查看確認成功打開：
balance_switch true
balancer_enabled
6.執行balancer命令手動觸發負載均衡。
說明建議打開和手動觸發負載均衡操作在業務低峰期進行。
7.FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務 > HBase”，單擊“HMaster(主)”，打開該HBase實例的WebUI，刷新頁面查看Region分布是否均衡。
- 是，執行步驟8。
- 否，執行步驟21。
8.觀察該告警是否清除。
- 是，處理完畢。
- 否，執行步驟9。
清理無用HBase表
說明在清理過程中，請謹慎操作，確保刪除數據的準確性。
9.在FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務 > HBase”，單擊“HMaster(主)”，打開該HBase實例的WebUI，查看該HBase服務實例上存儲的表并記錄可刪除的無用表。
10.在hbase shell中，執行disable和drop命令，確認刪除無用表，以減少Region數：
disable '待刪除表名'
drop '待刪除表名'
11.在hbase shell中，執行命令查看目前負載均衡功能是否打開：
balancer_enabled
- 是，執行步驟13。
- 否，執行步驟12。
12.在hbase shell中，執行命令打開負載均衡功能并確認成功打開：
balance_switch true
balancer_enabled
13.在hbase shell中，執行balancer命令手動觸發負載均衡。
14.在FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務 > HBase”，單擊產生該告警的HBase服務實例，單擊“HMaster(主)”，打開該HBase實例的WebUI，刷新頁面查看Region分布是否均衡。
- 是，執行步驟15。
- 否，執行步驟21。
15.觀察該告警是否清除。
- 是，處理完畢。
- 否，執行步驟16。
調整閾值
16.在FusionInsight Manager首頁，選擇“運維 > 告警 > 閾值設置 > 待操作集群的名稱 > HBase > 單個RegionServer的Region數目”，選中目前應用的規則，單擊“修改”查看目前的閾值設置是否合理。
- 如果過小，則根據集群實際情況，增大閾值，執行步驟17。
- 如果閾值設置合理，則執行步驟18。
17.觀察該告警是否清除。
- 是，處理完畢。
- 否，執行步驟18。
系統擴容
18.對HBase集群擴容，增加節點，并在節點上增加RegionServer實例，然后按照“負載均衡”小節中，打開負載均衡功能并手動觸發。
19.在FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務”，單擊產生該告警的HBase服務實例，單擊“HMaster(主)”，打開該HBase實例的WebUI，刷新頁面查看Region分布是否均衡。
- 是，執行步驟20。
- 否，執行步驟21。
20.觀察該告警是否清除。
- 是，處理完畢。
- 否，執行步驟21。
收集故障信息
21.在主備集群的FusionInsight Manager界面，選擇“運維 > 日志 > 下載”。
22.在“服務”中勾選待操作集群的“HBase”。
23.單擊右上角的
設置日志收集的“開始時間”和“結束時間”分別為告警產生時間的前后10分鐘，單擊“下載”。
24.請聯系運維人員，并發送已收集的故障日志信息。
告警清除
此告警修復后，系統會自動清除此告警，無需手工清除。
參考信息
無。
