MRS MapReduce
更新時間 2023-07-18 19:09:43
最近更新時間: 2023-07-18 19:09:43
分享文章
本章節主要介紹節點參考的 MRS MapReduce。
功能
通過MRS MapReduce節點實現在MRS中執行預先定義的MapReduce程序。
參數
用戶可參考下表配置MRS MapReduce節點的參數。
屬性參數
| 參數 | 是否必選 | 說明 |
|---|---|---|
| 節點名稱 | 是 | 節點名稱，可以包含中文、英文字母、數字、“_”、“-”、“/”、“<”、“>”等各類特殊字符，長度為1～128個字符。 |
| MRS集群名 | 是 | 選擇MRS集群。如需新建集群，請參考以下方法： 單擊   ，進入“集群列表”頁面新建MRS集群。前往MRS管理控制臺進行新建。 |
| MapReduce作業名稱 | 是 | MRS作業名稱，只能包含英文字母、數字、“_”，且長度為1~64個字符。 說明 作業名稱不得包含中文字符、超出長度限制等。如果作業名稱不符合規則，將導致提交MRS作業失敗。 |
| Jar包資源 | 是 | 選擇Jar包。在選擇Jar包之前，您需要先將Jar包上傳至OBS桶中，并在“資源管理”頁面中新建資源將Jar包添加到資源管理列表中，具體操作請參考管理資源章節中的“新建資源”。 |
| Jar包參數 | 否 | Jar包的參數。 |
| 輸入數據路徑 | 否 | 選擇輸入數據所在的路徑。 |
| 輸出數據路徑 | 否 | 選擇輸出數據存儲的路徑。 |
高級參數
| 參數 | 是否必選 | 說明 |
|---|---|---|
| 節點狀態輪詢時間（秒） | 是 | 設置輪詢時間（1~60秒），每隔x秒查詢一次節點是否執行完成。 |
| 節點執行的最長時間 | 是 | 設置節點執行的超時時間，如果節點配置了重試，在超時時間內未執行完成，該節點將不會再重試，直接置為失敗狀態。 |
| 失敗重試 | 是 | 節點執行失敗后，是否重新執行節點。 是：重新執行節點，請配置以下參數。 ? 最大重試次數 ? 重試間隔時間（秒） 否：默認值，不重新執行節點。 說明 如果作業節點配置了重試，并且配置了超時時間，該節點執行超時后將不會再重試，直接置為失敗狀態。 |
| 失敗策略 | 是 | 節點執行失敗后的操作： 終止當前作業執行計劃：停止當前作業運行，當前作業實例狀態顯示為“失敗”。 繼續執行下一節點：忽略當前節點失敗，當前作業實例狀態顯示為“忽略失敗成功”。 掛起當前作業執行計劃：暫停當前作業運行，當前作業實例狀態顯示為“等待運行”。 終止后續節點執行計劃：停止后續節點的運行，當前作業實例狀態顯示為“失敗”。 |
| 空跑 | 否 | 如果勾選了空跑，該節點不會實際執行，將直接返回成功。 |
