配置云搜索服務目的端參數
更新時間 2023-07-10 10:23:42
最近更新時間: 2023-07-10 10:23:42
分享文章
本章節主要介紹配置云搜索服務目的端參數。
作業中目的連接為配置Elasticsearch/云搜索服務（CSS）連接，即將數據導入到云搜索服務時，目的端作業參數如下表所示。
表 Elasticsearch作為目的端時的作業參數
| 參數名 | 說明 | 取值樣例 |
|---|---|---|
| 索引 | 待寫入數據的Elasticsearch的索引，類似關系數據庫中的數據庫名稱。CDM支持自動創建索引和類型，索引和類型名稱只能全部小寫，不能有大寫。 | index |
| 類型 | 待寫入數據的Elasticsearch的類型，類似關系數據庫中的表名稱。類型名稱只能全部小寫，不能有大寫。 | type |
| 管道ID | 需要先在kibana中創建管道ID，這里才可以選擇，該參數用于數據傳到Elasticsearch后，通過Elasticsearch的數據轉換pipeline進行數據格式變換。 | pipeline_id |
| 定時創索引 | 對于持續寫入數據到Elasticsearch的流式作業，CDM支持在Elasticsearch中定時創建新索引并寫入數據，方便用戶后期刪除過期的數據。支持按以下周期創建新索引： 每小時：每小時整點創建新索引，新索引的命名格式為“索引名+年+月+日+小時”，例如“index2018121709”。 每天：每天零點零分創建新索引，新索引的命名格式為“索引名+年+月+日”，例如“index20181217”。 每周：每周周一的零點零分創建新索引，新索引的命名格式為“索引名+年+周”，例如“index201842”。 每月：每月一號零點零分創建新索引，新索引的命名格式為“索引名+年+月”，例如“index201812”。 不創建：選擇此項表示不創建定時索引。 從文件類抽取數據時，必須配置單個抽取（“抽取并發數”參數配置為1），否則該參數無效。 |
每小時 |
