ALM-16048 Tez或者Spark庫路徑不存在
更新時間 2023-06-28 10:27:46
最近更新時間: 2023-06-28 10:27:46
分享文章
本章節主要介紹ALM-16048 Tez或者Spark庫路徑不存在的告警。
告警解釋
系統每180秒周期性檢測Tez和Spark庫路徑,不存在則產生該告警。
告警屬性
| 告警ID | 告警級別 | 是否自動清除 |
|---|---|---|
| 16048 | 重要 | 是 |
告警參數
| 參數名稱 | 參數含義 |
|---|---|
| 來源 | 產生告警的集群名稱。 |
| 服務名 | 產生告警的服務名稱。 |
| 角色名 | 產生告警的角色名稱。 |
| 主機名 | 產生告警的主機名。 |
對系統的影響
Tez或者Spark庫路徑不存在,會影響Hive on Tez,Hive on Spark的功能。
可能原因
Tez或者Spark在HDFS上庫路徑被刪除。
處理步驟
檢查Tez和Spark庫路徑
1.以root用戶登錄客戶端所在節點。
2.執行以下命令,檢查“hdfs://hacluster/user/ {用戶名} /.Trash/Current/ ”目錄下是否存在該tezlib或者sparklib目錄。
hdfs dfs -ls hdfs://hacluster/user/ <用戶名> /.Trash/Current/
例如存在“/user/hive/tezlib/8.1.0.1/”和“/user/hive/sparklib/8.1.0.1/”:
host01:/opt/Bigdata/client # hdfs dfs -ls
hdfs://hacluster/user/test/.Trash/Current/
Found 1 items
drwx------ - test hadoop 0 2019-06-17 19:53
hdfs://hacluster/user/test/.Trash/Current/user
- 是,執行步驟3。
- 否,執行步驟5。
3.執行以下命令,將tezlib和sparklib重新復原。
hdfs dfs -mv hdfs://hacluster/user/ <用戶名> /.Trash/Current/user/hive/tezlib/8.1.0.1/tez.tar.gz /user/hive/tezlib/8.1.0.1/tez.tar.gz
4.查看本告警是否恢復。
- 是,操作結束。
- 否,執行步驟5。
收集故障信息
5.收集客戶端后臺“/.Trash/Current/”目錄下內容的相關信息。
6.請聯系運維人員,并發送已收集的故障信息。
告警清除
此告警修復后,系統會自動清除此告警,無需手工清除。
參考信息
無。