本模塊主要用于數據源管理。您可以在本模塊手動添加或導入數據源,或者利用主動嗅探資產和被動發現資產功能,待系統自動發現數據源后,再對數據源執行添加操作。
查看數據源列表
1.使用安全管理員賬號登錄數據分類分級實例。
2.在左側導航欄選擇“數據資產管理 > 數據源管理”即可進入“數據源管理”頁面查看數據源列表。
數據源列表的展示字段包括:數據源名稱、數據源類型、主機:端口、業務系統、部門、責任人、創建用戶、創建時間、最近同步時間、最近分類分級時間、發現結果、同步狀態、同步標識、分類分級狀態、同步進度、操作。由于頁面寬度的限制,部分字段需要拉動頁面下方水平滾動條進行查看。其中:
同步狀態:分為待同步、已同步、同步中、失敗四種;
同步標識:分為已更新、建議重配兩種;同步狀態為待同步或失敗的數據源,其同步標識為空;
分類分級狀態:分為待執行、執行中、暫停、完成、失敗五種,執行分類分級任務見“分類分級管理 > 結構化數據”頁面;
發現結果:顯示最近一次分類分級中發現的新增字段數和減少字段數。
新增數據源
1.使用安全管理員賬號登錄數據分類分級實例。
2.在左側導航欄選擇“數據資產管理 > 數據源管理”,進入“數據源管理”頁面。
3.單擊頁面左上角的“新增”即可開始新增數據源。
| 參數 | 參數說明 | 填寫示例 |
|---|---|---|
| 數據源類型 | 支持選擇以下類型:
| DB:MySQL |
| 數據源名稱 | 自定義新增的數據源名稱 | Test |
| 行業模板 | 選擇需要使用的行業模板,如何新增行業模板可參考:行業模板章節。 | 金融 |
| 驅動 | 選擇當前數據源的數據庫驅動版本 | - |
| 主機 | 填寫數據源的主機地址,一般可填寫IP地址 | 192.168.0.1 |
| 端口 | 填寫數據源的主機端口 | 8080 |
| 庫名/實例名 | 填寫數據源的庫名或實例名 | Test |
| 版本號 | 填寫數據源的版本號 | v1 |
| 賬號 | 填寫可正常訪問數據源的賬號 | admin |
| 密碼 | 填寫正確的密碼 | - |
4.填寫完畢后,單擊“保存”,系統會彈出提示“是否自動同步”,根據您自身需求選擇。
若選擇“確定”,系統會自動同步當前數據源,獲取其中數據表的表名、表注釋、字段名、字段注釋等信息,為后續分類分級掃描做準備;該過程不涉及字段內容的抽樣。
若選擇“取消”,則關閉彈框,不執行任何其他操作,用戶界面停留在當前頁面,新增數據源需要后續手動點擊“操作”列“同步”。
說明
若您添加的為非METADATA類型的數據源,可以對數據庫賬號進行“獲取掃描配置”。
若獲取掃描配置成功,提示“測試成功”;
若獲取掃描配置失敗,提示“測試失敗”,并且鼠標懸浮時提示具體錯誤信息。
METADATA數據源配置
當您選擇METADATA數據源類型,可以在無法直連數據庫的情況下,根據表字段信息進行分類分級,文件中需上傳的內容請參見下圖。
文件上傳后,系統將自動對內容進行逐行校驗。若提示校驗失敗,您可以單擊提示右側“點擊下載”按鈕,下載帶有錯誤信息提示的文件。錯誤文件在用戶原上傳文件內容的基礎上,新增“錯誤原因”一列,用于記錄對應行的數據未通過校驗的原因。根據提示,調整文件后重新上傳符合要求的文件。
成功上傳后,系統提示“上傳已完成,請及時進行分類分級執行,確保數據格式準確”。
SFTP/FTP/LOCAL數據源配置
選擇SFTP、FTP、LOCAL數據源類型時,表單在基本屬性和高級屬性模塊提供額外配置內容,包括文件路徑、文件名匹配、文件列包圍符、文件列分割符、文件編碼格式,且均為必填項。
| 配置內容 | 說明 |
|---|---|
| 文件路徑 | 系統將掃描該路徑下的所有文件,包括子目錄下的文件; 本配置項設有格式校驗,路徑必須以“/”開頭; 不允許描述相對路徑(包含子目錄)。 |
| 文件名匹配 | 默認值為“*”,表示查找所有文件; 支持使用通配符進行文件名匹配,如“*.csv”,此時系統只掃描符合的文件。 |
| 文件列包圍符 | 默認值為英文雙引號,長度不得超過一個字符。支持輸入ASCII碼,勾選文本輸入框右側的勾選框后開啟ASCII碼輸入模式。(僅對CSV、TXT格式文件生效) |
| 文件列分隔符 | 默認值為英文逗號,長度不得超過一個字符。支持輸入ASCII碼,勾選文本輸入框右側的勾選框后開啟ASCII碼輸入模式。(僅對CSV、TXT格式文件生效) |
| 文件編碼 | 可選項包括UTF-8和GBK,默認為UTF-8。(僅對CSV、TXT格式文件生效) |
HIVE/INCEPTOR數據源配置
選擇Hive或Inceptor數據源類型時,表單在基本屬性模塊提供額外配置內容,包括集群平臺、認證類型等,且均為必填項。
| 配置內容 | 說明 |
|---|---|
| 集群平臺 | 可選項包括APACHE_HADOOP、CDH(Hive),或TDH(Inceptor)。 |
| 認證類型 | 可選項包括常規認證、Kerberos認證(Hive),或常規認證、Kerberos認證、Token認證(Inceptor)
|
導入數據源
1.使用安全管理員賬號登錄數據分類分級實例。
2.在左側導航欄選擇“數據資產管理 > 數據源管理”即可進入“數據源管理”頁面查看數據源列表。
3.單擊頁面右上角的“導入”按鈕,可以批量導入數據源。
4.選擇“模板下載”,在下載的模板中填寫相關內容。
說明
數據源名稱不得與系統內已有的數據源名稱重復;
若類型為ORACLE數據庫,則“庫名/實例名”與“服務名”必選填一個,“角色”在NORMAL、SYSDBA、SYSOPER中必選一個值;
若類型為INFORMIX數據庫,則“庫名/實例名”與“服務名”均為必填;
SFTP/FTP/LOCAL/METADATA/MYSQL分片環境/HIVE類型數據源暫不支持通過該模板批量導入,請使用<新增>功能在產品界面中直接添加。
導入本文件時無需配置行業模板。數據源導入成功后,行業模板默認使用當前的默認模板。
導入數據字典
數據字典是用戶自身業務系統中已有的描述字段業務意義的文件。
1.您可以在數據源列表頁選擇“操作”列的“… > 上傳數據字典”。
2.在彈出的窗口中,選擇“樣例下載”,下載模板并填寫內容,包含以下字段:數據庫名、Schema、表名、表注釋、字段名、字段注釋。其中,數據庫名、Schema、表名、字段名為必填項。
其他操作
編輯數據源:在“數據源管理”頁面,選擇需要編輯的數據源,單擊“操作”列的“編輯”按鈕即可編輯數據源。
刪除數據源:在“數據源管理”頁面,選擇需要刪除的數據源,選擇“操作”列的“… > 刪除”按鈕即可刪除數據源。
同步數據源:在“數據源管理”頁面,選擇需要同步的數據源,單擊“操作”列的“同步”按鈕即可同步數據源。在數據源同步時,您可以選擇“終止同步”終止數據同步。
說明
同步完成后,數據資產目錄將顯示該數據源的庫表列結構;同時,安全評估-數據庫賬號模塊將同步得到相關數據庫賬號。