管理資源
更新時間 2023-07-18 22:26:59
最近更新時間: 2023-07-18 22:26:59
分享文章
本章節主要介紹配置管理的管理資源。
用戶可以通過資源管理功能,上傳自定義代碼或文本文件作為資源,在節點運行時調用。可調用資源的節點包含DLI Spark、MRS Spark、MRS MapReduce和DLI Flink Job。
創建資源后,配置資源關聯的文件。在作業中可以直接引用資源。當資源文件變更,只需要修改資源引用的位置即可,不需要修改作業配置。關于資源的使用樣例請參見開發一個DLI Spark作業。
約束限制
該功能依賴于OBS服務或MRS HDFS服務。
新建目錄(可選)
如果已存在可用的目錄,可以不用新建目錄。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源目錄中,單擊

,彈出“新建目錄”頁面,配置如下表所示的參數。
資源目錄參數
| 參數 | 說明 |
|---|---|
| 目錄名稱 | 資源目錄的名稱,只能包含英文字母、數字、中文字符、“_”、“-”,且長度為1~32個字符。 |
| 選擇目錄 | 選擇該資源目錄的父級目錄,父級目錄默認為根目錄。 |
- 單擊“確定”,新建目錄。
新建資源
新建資源前,請確保您已開通OBS服務。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 單擊“新建資源”,彈出“新建資源”頁面,配置如下表所示的參數。單擊“確定”,新建資源。
資源管理參數
| 參數 | 是否必選 | 說明 |
|---|---|---|
| 名稱 | 是 | 資源的名稱,只能包含英文字母、數字、中文字符、“_”、“-”,且長度為1~32個字符。 |
| 類型 | 是 | 選擇資源的文件類型: jar:用戶jar文件。 pyFile:用戶Python文件。 file:用戶文件。 archive:用戶AI模型文件。 |
| 資源位置 | 是 | 選擇資源所在的位置,當前支持OBS和HDFS兩種資源存儲位置。HDFS當前只支持MRS Spark、MRS Flink Job、MRS MapReduce節點。 |
| 主Jar包 | 是 | “資源位置”為“OBS”時,選擇已上傳到OBS中的主Jar包。 “資源位置”為“HDFS”時,請先選擇MRS集群,然后再選擇已經上傳到HDFS中的主Jar包。 |
| 依賴Jar包 | 否 | 選擇已上傳到OBS中的依賴Jar包。“類型”為“jar”,且“資源位置”為“OBS”或者“HDFS”時,配置該參數。 |
| 選擇資源 | 是 | 選擇具體的資源文件。 |
| 存儲路徑 | 是 | 選擇資源的目的存儲路徑。“資源位置”為“本地”時,配置該參數。 |
| 描述 | 否 | 資源的描述信息。 |
| 選擇目錄 | 是 | 選擇資源所屬的目錄,默認為根目錄。 |
編輯資源
資源新建完成后,用戶可以根據需求修改資源的參數。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源的“操作”列,單擊“編輯”,彈出“編輯資源”頁面,參考下表修改資源的參數。
- 單擊“確定”,保存修改。
刪除資源
當用戶不需要使用某個資源時,可以刪除該資源。
刪除資源前,請確保該資源未被作業使用。刪除資源的時候,會檢查資源被哪些作業引用,引用列表中“版本”一列,表示此資源被哪些作業版本引用。點擊刪除時,會刪除對應的作業和這個作業的所有版本信息。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源的“操作”列,單擊“刪除”,彈出“刪除資源”頁面。
- 單擊“確定”,刪除資源。
導入資源
當用戶想要導入某個資源時,可以參考如下操作導入該資源。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源目錄中,單擊

,選擇“導入資源”,彈出“導入資源”頁面。 - 選擇已上傳至OBS中的資源文件,然后單擊“下一步”,導入完成后,單擊“關閉”完成資源的導入。
導出資源
當用戶想要導出某個資源到本地時,可以參考如下操作導出該資源。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源目錄中,單擊

,選擇“導出資源”,系統開始下載資源到本地。
查看資源引用
當用戶想要查看某個資源被引用的情況時,可以參考如下操作查看引用。
- 登錄DataArts Studio控制臺。選擇實例,點擊“進入控制臺”,選擇對應工作空間的“數據開發”模塊,進入數據開發頁面。
詳見下圖:選擇數據開發


- 在數據開發主界面的左側導航欄,選擇“配置管理 > 資源管理”。
- 在資源目錄中,右鍵單擊對應的資源名,選擇“查看引用”,彈出“引用列表”窗口。
- 在引用列表窗口,可以查看該資源被引用的情況。