告警解釋
DataNode的配置參數“dfs.datanode.data.dir”指定了DataNode的數據目錄。當所配置的目錄路徑無法創建、與系統關鍵目錄使用同一磁盤或多個目錄使用同一磁盤時，系統即刻產生此告警。
當修改DataNode的數據目錄合理后，重啟該DataNode，告警清除。
告警屬性
| 告警ID | 告警級別 | 是否自動清除 |
|---|---|---|
| 14011 | 重要 | 是 |
告警參數
| 參數名稱 | 參數含義 |
|---|---|
| 來源 | 產生告警的集群名稱。 |
| 服務名 | 產生告警的服務名稱。 |
| 角色名 | 產生告警的角色名稱。 |
| 主機名 | 產生告警的主機名。 |
對系統的影響
如果將DataNode數據目錄掛載在根目錄等系統關鍵目錄，長時間運行后會將根目錄寫滿，導致系統故障。
不合理的DataNode數據目錄配置，會造成HDFS的性能下降。
可能原因
- DataNode數據目錄創建失敗。
- DataNode數據目錄與系統關鍵目錄（“/”或“/boot”）使用同一磁盤。
- DataNode數據目錄中多個目錄使用同一磁盤。
處理步驟
查看告警原因和產生告警的DataNode節點信息
1.在FusionInsight Manager首頁，選擇“運維 > 告警 > 告警”，在
2.通過“定位信息”的“主機名”，獲取告警產生的DataNode節點的主機名。
刪除DataNode數據目錄中與磁盤規劃不符的目錄
3.選擇“集群 > 待操作集群的名稱 > 服務 > HDFS > 實例”，在實例列表中單擊產生告警的節點主機上的DataNode實例。
4.單擊“實例配置”，查看DataNode數據目錄配置參數“dfs.datanode.data.dir”的值。
5.查看所有的DataNode數據目錄，是否有與磁盤規劃不一致的目錄。
- 是，執行步驟6。
- 否，執行步驟9。
6.修改該DataNode節點的配置參數“dfs.datanode.data.dir”的值，刪除錯誤的路徑。
7.選擇“集群 > 待操作集群的名稱 > 服務 > HDFS > 實例”，重啟該DataNode實例。
8.檢查該告警是否恢復。
- 是，處理完畢。
- 否，執行步驟9。
9.以root用戶登錄到產生告警的DataNode的節點。
- 如果告警原因為“DataNode數據目錄創建失敗”，執行步驟10。
- 如果告警原因為“DataNode數據目錄與系統關鍵目錄（/或/boot）使用同一磁盤”，執行步驟17。
- 如果告警原因為“DataNode數據目錄中多個目錄使用同一磁盤”，執行步驟21。
檢查DataNode數據目錄是否創建失敗
10.執行su - omm命令，切換到omm用戶。
11.步驟 8 使用ls命令查看DataNode數據目錄中的每個目錄是否存在。
- 是，執行步驟26。
- 否，執行步驟12。
12.使用mkdir 數據目錄命令創建該目錄，查看是否可以創建成功。
- 是，執行步驟24。
- 否，執行步驟13。
13.在FusionInsight Manager首頁，選擇“運維 > 告警 > 告警”，查看是否存在告警“ALM-12017 磁盤容量不足”。
- 是，執行步驟14。
- 否，執行步驟15。
14.參考“ALM-12017 磁盤容量不足”對磁盤容量問題進行處理，查看“ALM-12017 磁盤容量不足”告警是否消除。
- 是，執行步驟12。
- 否，執行步驟15。
15.查看omm用戶對該目錄的所有上層目錄是否有“rwx”或者“x”權限。（例如“/tmp/abc/”，“tmp”目錄有“x”權限，“abc”目錄有“rwx”權限。）
- 是，執行步驟24。
- 否，執行步驟16。
16.在root用戶下，執行chmod u+rwx path或者chmod u+x path命令給這些路徑添加omm用戶的“rwx”或者“x”權限，然后執行步驟12。
檢查DataNode數據目錄是否與系統關鍵目錄使用同一磁盤
17.分別使用df命令獲取DataNode數據目錄中的每個目錄的磁盤掛載情況。
18.查看命令結果的磁盤掛載目錄是否為系統關鍵目錄（“/”或“/boot”）。
- 是，執行步驟19。
- 否，執行步驟24。
19.修改該DataNode節點的配置參數“dfs.datanode.data.dir”的值，刪除與系統關鍵目錄使用同一磁盤的目錄。
20.繼續執行步驟24。
檢查DataNode數據目錄中是否多個目錄使用同一磁盤
21.分別使用df命令獲取DataNode數據目錄中每個目錄的磁盤掛載情況。記錄命令結果的磁盤掛載目錄。
22.修改該DataNode節點的配置參數“dfs.datanode.data.dir”的值，對于其中磁盤掛載目錄相同的DataNode目錄，僅保留其中的一個目錄，刪除其他目錄。
23.繼續執行步驟24。
重啟DataNode，檢查告警是否消除
23.在FusionInsight Manager首頁，選擇“集群 > 待操作集群的名稱 > 服務 > HDFS > 實例”，重啟該DataNode實例。
24.檢查該告警是否恢復。
- 是，處理完畢。
- 否，執行步驟26。
收集故障信息
25.在FusionInsight Manager首頁，選擇“運維 > 日志 > 下載”。
26.在“服務”中勾選待操作集群的“HDFS”。
27.單擊右上角的
設置日志收集的“開始時間”和“結束時間”分別為告警產生時間的前后10分鐘，單擊“下載”。
28.請聯系運維人員，并發送已收集的故障日志信息。
告警清除
此告警修復后，系統會自動清除此告警，無需手工清除。
參考信息
無。
