數(shù)據(jù)地圖
DataWorks數(shù)據(jù)地圖是在元數(shù)據(jù)基礎上提供的企業(yè)數(shù)據(jù)目錄管理模塊,元數(shù)據(jù)詳情查看、數(shù)據(jù)血緣和數(shù)據(jù)類目管理等功能。數(shù)據(jù)地圖可以幫助您更好地查找、理解和使用Hologres數(shù)據(jù)。本文為您介紹如何在數(shù)據(jù)地圖中配置Hologres元數(shù)據(jù)采集器及相關(guān)操作。
使用限制
僅Hologres V1.1及以上版本支持使用數(shù)據(jù)地圖功能,如果您的實例是V1.1以下版本,請您使用自助升級或加入Hologres釘釘交流群反饋,詳情請參見如何獲取更多的在線支持?。
在數(shù)據(jù)地圖中配置Hologres元數(shù)據(jù)采集器一個小時后才能看到血緣信息。
僅在如下地域提供數(shù)據(jù)血緣服務。
華東1(杭州)、華東2(上海)、華北2(北京)、華南1(深圳)、中國(香港)、新加坡。
元數(shù)據(jù)采集與接入
您需要通過元數(shù)據(jù)采集功能將Hologres數(shù)據(jù)源中的元數(shù)據(jù)導入數(shù)據(jù)地圖進行統(tǒng)一管理,步驟如下。采集完成后,您可以在數(shù)據(jù)地圖搜索并查看Hologres數(shù)據(jù)源的元數(shù)據(jù)信息。
- 登錄DataWorks控制臺后,進入數(shù)據(jù)地圖頁面,操作詳情請參見進入數(shù)據(jù)地圖。
- 在頂部菜單欄,單擊數(shù)據(jù)發(fā)現(xiàn)。
- 在左側(cè)導航欄,單擊 。
- 在Hologres元數(shù)據(jù)采集頁面,單擊新建采集器。
- 在新建采集器配置向?qū)ы撁?,完成以下操作?/span>
- 配置基本信息。
- 在基本信息頁簽下,配置各項參數(shù)。
參數(shù) 描述 采集器名稱 采集器的名稱,必填且唯一。 采集器描述 對采集器進行簡單描述。 工作空間 采集對象所屬的DataWorks工作空間。 數(shù)據(jù)源類型 采集對象的類型,默認為Hologres。 - 單擊下一步。
- 在基本信息頁簽下,配置各項參數(shù)。
- 選擇采集對象。
- 在選擇采集對象頁簽,選擇相應的數(shù)據(jù)源。
目前僅支持采集已綁定的Hologres實例的元數(shù)據(jù)。如果沒有您需要的數(shù)據(jù)源,請單擊去新建,創(chuàng)建新的數(shù)據(jù)源。詳情請參見配置Hologres數(shù)據(jù)源。
- 單擊測試采集連通性后的開始測試,待顯示測試成功,說明已連通DataWorks元數(shù)據(jù)服務網(wǎng)絡。說明 如果顯示測試連通性未通過,則您需要查看具體原因解決相關(guān)問題。
- 單擊下一步。
- 在選擇采集對象頁簽,選擇相應的數(shù)據(jù)源。
- 配置執(zhí)行計劃。在配置執(zhí)行計劃頁簽,配置執(zhí)行計劃。執(zhí)行計劃包括按需執(zhí)行、每月、每周、每天及每小時。根據(jù)不同的執(zhí)行周期,生成不同的執(zhí)行計劃,在相應執(zhí)行計劃的時間內(nèi),對目標數(shù)據(jù)源進行元數(shù)據(jù)采集。具體如下:
- 按需采集:根據(jù)實際業(yè)務需求,在業(yè)務需要時才會采集Hologres元數(shù)據(jù)。
- 月采集:即在每月的特定幾天,在特定時間點自動采集一次Hologres元數(shù)據(jù)。重要 部分月份不包含29、30、31日,請您謹慎選擇月末日期。如下圖所示,在每月的1、11及21日的09:00,系統(tǒng)會自動采集一次Hologres元數(shù)據(jù)。CRON 表達式會根據(jù)您的配置自動生成。
- 周采集:即在每周的特定幾天,在特定時間點自動采集一次Hologres元數(shù)據(jù)。如下圖所示,在每周的星期一(MON)及星期天(SUN)的03:00,系統(tǒng)會自動采集一次Hologres元數(shù)據(jù)。CRON 表達式會根據(jù)您的配置自動生成。不輸入時間時,則默認在每周指定幾天的00:00:00采集。
- 天采集:即在每天特定的時間點自動采集一次Hologres元數(shù)據(jù)。如下圖所示,在每天的01:00,系統(tǒng)會自動采集一次Hologres元數(shù)據(jù)。CRON 表達式會根據(jù)您的配置自動生成。
- 小時采集:即在每小時的第
N*5分鐘
自動采集一次Hologres元數(shù)據(jù)。說明 目前小時周期的采集任務,僅支持選擇的周期時間為第5分鐘的倍數(shù)。如下圖所示,在每小時的第5分鐘和第10分鐘,系統(tǒng)會自動采集一次Hologres元數(shù)據(jù)。CRON 表達式會根據(jù)您的配置自動生成。 - 單擊下一步。
- 確認信息。在信息確認頁簽,確認新建采集器的內(nèi)容。
- 配置基本信息。
- 確認配置信息無誤后,單擊確認,成功創(chuàng)建采集器。
- 在Hologres元數(shù)據(jù)采集頁面,您可以查看并管理目標采集器的相關(guān)信息。主要操作說明如下:
- 您可以查看相應采集器的運行狀態(tài)、運行計劃、上次運行時間、上次消耗時間、平均運行耗時及上次運行時更新及添加的表數(shù)量。
- 單擊目標采集器操作列的詳情、編輯、刪除、運行、停止,執(zhí)行相應操作:
- 詳情:查看該采集器的采集器名稱、數(shù)據(jù)源類型及執(zhí)行計劃。
- 編輯:修改該采集器的信息。
- 刪除:刪除該采集器。
- 運行:單擊運行,即可根據(jù)該采集所配置的任務采集數(shù)據(jù)。僅當執(zhí)行計劃配置為按需執(zhí)行時,才會生成運行操作,其他周期計劃的任務不涉及該操作。
- 停止:停止運行中的采集器。僅運行中狀態(tài)的采集器會顯示該操作按鈕。
其他操作
數(shù)據(jù)總覽
您可以在數(shù)據(jù)總覽頁面查看當前地域(Region)下配置了數(shù)據(jù)采集器的Hologres數(shù)據(jù)庫統(tǒng)計信息和表信息,進入數(shù)據(jù)總覽詳細步驟請參見數(shù)據(jù)總覽。
查找表
數(shù)據(jù)地圖支持通過表名,表描述、字段名及字段描述等搜索表,同時還可以通過表所在類目,項目或數(shù)據(jù)庫進行表過濾。查找表詳細步驟請參見查找表。
查看表詳情
您可以單擊目標表名稱跳轉(zhuǎn)至表詳情頁面,查看表的基礎信息、產(chǎn)出信息和血緣信息等表的詳情信息。查看表詳情步驟請參見查看表詳情。
您可以在此處查看表的元數(shù)據(jù)信息。
您可以在此處查看表血緣和字段血緣信息。