物理表詳情入口
在Dataphin首頁,單擊頂部菜單欄的治理 > 資產清單。
單擊數據表頁簽,選擇目標物理表,單擊物理表的名稱或操作列下的圖標,進入對象詳情頁面。
物理表詳情
編號 | 描述 |
①概要信息 | 為您展示表的類型、環境、名稱、標簽、描述等信息。同時,您還可以執行如下操作: 搜索其他資產對象:您可以快捷搜索并切換查看其他資產的詳情。 查看資產詳情:如果當前對象已上架到資產目錄,您可以快捷跳轉至目錄詳情頁查看已上架信息。 查看生產/開發對象:支持快速切換當前對象在對應生產/開發環境的對象詳情。 標簽:為您展示當前資產已配置的標簽值。如需修改標簽,您可以單擊編輯: 收藏:單擊即可收藏或取消收藏。收藏后,您可以在資產清單列表 > 我的足跡查看最近收藏的30條資產,方便后續查詢;您也可以在個人數據中心查看全量收藏的資產,詳情請參見查看及管理我收藏的資產。 去分析:單擊跳轉至Notebook頁面自動創建對應的Notebook任務,詳情請參見新建Notebook。 申請權限:單擊快捷跳轉到當前表的權限申請頁面,詳情請參見申請、續期和交還表權限。 反饋質量問題:您可以通過該功能向當前質量負責人反饋在使用資產過程中遇到的質量問題(如數據產出不穩定、數據內容不準確等),以通知相關負責人及時進行整改,從而推動提升資產可用性和健康度。配置詳情請參見添加并管理問題清單。 您需要開通數據質量模塊才能使用反饋質量問題功能。后續,您可以在質量模塊的問題清單中查看反饋問題的處理流程和結果。 生成select語句:單擊生成當前表查詢語句,可選擇是否需要添加轉義符。您可以復制查詢語句后到即席查詢或分析頁面查詢數據。 查看DDL語句:單擊查看當前數據表在租戶計算引擎中對應的DDL語句。此外,您也可以選擇數據源類型,單擊生成DDL語句,系統將生成在指定類型的數據源系統中創建與當前表相同結構的表DDL語句。若您勾選了自動添加轉義符,生成的DDL語句將根據選擇的源類型自動添加對應的轉義符,減少系統關鍵詞誤轉義等問題產生。 編輯表:支持跳轉至研發-表管理頁面,編輯該表的DDL信息,詳情請參見新建離線物理表。 導出字段:導出表中的字段信息,格式類型為CSV,便于其他開發或業務人員快速分析使用。 查看轉交記錄:為您展示當前數據表最近100條負責人轉交記錄。 查看權限列表:查看數據表權限信息。 刷新元數據:若數據表不是通過Dataphin平臺創建,或由于系統元數據獲取延遲導致查詢新建表無結果時,您可以單擊刷新元數據獲取最新的元數據信息,將指定的數據表元數據刷新至Dataphin系統中。
說明 分析平臺表不支持去分析、申請權限、反饋質量問題、編輯表、查看轉交記錄、查看權限列表操作。 |
②明細信息 | 為您展示表、字段和分區信息。 表詳情:為您展示該表的屬性信息,包括數據板塊、主題域、項目、最高涉密等級、是否分區表、是否分析平臺手工表、存儲類型、存儲格式、存儲量、生命周期。 字段信息:包括字段名稱、描述、數據類型、關聯標準(需購買數據標準模塊)、數據分類(需購買安全模塊)、數據分級(需購買安全模塊)、熱度信息,同時,您可以單擊操作列下的血緣關系圖標,查看以指定字段為中心的字段血緣關系。 分區信息:可查看數據表的分區信息。多級分區將按照各級分區組合結果展示,不同分區之間用 / 連接。例如:ds=20221001/pt1=a/pt2=b。注意:分區記錄數和存儲量信息僅供參考。
|
③血緣&影響 | 血緣為您展示表、字段之間的血緣關系。 影響分為數據表影響和集成同步影響,為您展示引用了當前表的直接下游表,引用了直接下游表的間接下游表以及對應的集成同步任務,最多15層。支持導出數據查看。 勾選僅展示直接下游表后,默認展示當前表直接影響的下游表,取消勾選將展現所有下游影響表,最多展示15層。 勾選僅展示當前表影響后,默認展示當前表作為輸入表的集成任務,取消勾選將展現當前及所有下游影響表作為輸入表的集成任務,最多展示15層。
|
④質量概況 | 若您開通了數據質量功能,為您展示當前數據表的規則校驗概覽和質量監控規則列表,單擊查看報告詳情按鈕或查看規則詳情按鈕,可快捷跳轉到數據質量模塊對應頁面查看更多詳情。 |
⑤數據探查 | 若您開通了數據質量功能,可以為數據表配置數據探查任務,快速了解數據概況,提前評估數據的可用性和潛在風險,如果您需要開啟自動探查,可以在元數據中心 > 探查配置中開啟相應配置,詳情請參見新建數據探查任務。 |
⑥數據預覽 | 若您擁有當前表的查表數據權限,可以使用數據預覽功能,否則需先申請查詢權限。如何申請,請參見申請、續期和交還表權限。 |
⑦產出信息 | 產出任務包含該對象的數據寫入任務、血緣自動解析或自定義配置以當前表為輸出表的任務,以及節點輸出名稱=項目名.表名的任務。 產出任務列表準實時更新,產出明細T+1更新。 |
⑧使用說明 | 您可以為數據表添加使用說明,為數據瀏覽者和消費者提供信息參考。可單擊新增使用說明,填寫使用說明標題及內容完成添加。 |
⑨資產信息 | 為您展示物理表的基礎信息、變更信息和使用信息等詳細信息。 |
表級血緣
表級血緣頁面為您展示包括集成同步任務、自定義血緣的計算任務及系統可自動解析血緣的SQL計算任務和邏輯表任務血緣關系圖。
序號 | 描述 |
①快捷操作區 | 僅展示直接血緣:選中后僅展示當前表直接血緣關系的上下游相關表。
說明 直接血緣是通過select、insert等語句讀取或寫入的上下游相關資產。 關聯血緣是通過join、group by、where條件等方式引用的相關資產。 表級血緣只要包含有直接血緣的字段就會展示對應的標識。
隱藏數據源表:選中后將隱藏來自數據源的表對象及其下游。 隱藏已刪除表:血緣在提交和發布任務時進行解析。特殊情況下,如果數據表不是通過Dataphin調度任務刪除的(如通過即席查詢刪除或直接在引擎側刪除),則不會觸發血緣更新,仍會展示在血緣圖中。勾選后,將不會展示已經刪除的表對象。
|
②圖例區 | 表級血緣支持的數據表,包括物理表、維度邏輯表、事實邏輯表、匯總邏輯表、標簽邏輯表、物理視圖、物化視圖、邏輯視圖、元表、鏡像表、數據源表。 |
③血緣圖展示區 | 為您展示完整的血緣鏈路圖,可手動展開多級上游或下游,支持根據數據表名稱關鍵字進行模糊搜索。 特殊的,若存在循環依賴,則無法繼續展開,需從起始節點繼續查看下游。 |
④對象詳情區 | 鼠標懸停在表上,為您展示表的詳情。 數據源表:為您展示表的名稱、對象類型、存儲格式、所屬數據源、血緣來源。 Dataphin數據表:為您展示表的名稱、對象類型、存儲格式、邏輯表及邏輯視圖的所屬板塊/物理表及物理視圖的所屬項目、負責人、存儲量、生命周期(Hadoop集群的計算引擎不支持展示該信息)、描述、血緣來源信息,同時您可以進行查看血緣、查看DDL和申請權限操作。 |
字段級血緣
字段血緣頁面為您展示自定義血緣的計算任務及系統可自動解析血緣的SQL計算任務和邏輯表任務的血緣關系圖。
序號 | 描述 |
①快捷操作區 | |
②圖例區 | 字段血緣支持的字段,包括計算源表字段、數據源表字段。 |
③血緣圖展示區 | 為您展示完整的血緣鏈路圖,可手動展開多級上游或下游,支持根據字段名稱關鍵字進行模糊搜索。 特殊的,若存在循環依賴,則無法繼續展開,需從起始節點繼續查看下游。 單擊中心字段可通過字段關鍵字進行模糊搜索以切換查看不同字段的血緣關系圖。 |
④對象詳情區 | 鼠標懸停在字段上,為您展示字段的名稱、對象類型、存儲格式、字段所在邏輯表及邏輯視圖的所屬板塊/字段所在物理表及物理視圖的所屬項目、所屬表、表負責人、數據類型、描述、血緣來源信息,同時您可以進行查看血緣和申請權限操作。 |
產出明細
您可查看該數據表產出任務,包含該對象的數據寫入任務、血緣解析或配置以當前表為輸出表的任務,以及節點輸出名稱=項目名.表名的任務。
序號 | 描述 |
①任務詳情 | 為您展示節點名稱、任務ID、所屬板塊、負責人信息。 |
②周期實例 | 為您展示平均開始時間、平均產出時間、平均運行時長信息。 平均開始時間:統計最近15天所有正常調度的周期實例,第一次運行開始時間的平均值,T+1更新。 平均產出時間:統計最近15天所有正常調度的周期實例,第一次運行成功的結束時間的平均值,重跑場景不納入統計,T+1更新。 平均運行時長:統計最近15天所有正常調度的周期實例,所有運行成功記錄的平均運行時長的平均值,其中腳本任務的平均運行時長統計包括重跑場景,邏輯表任務的平均運行時長統計不包括重跑場景,T+1更新。
說明 小時、分鐘實例支持按照周期查看運行明細,以當前任務最新調度配置劃分的周期區間為準,計算定時時間相同的歷史實例對應的運行平均值。
|
③運行明細 | 為您展示業務日期、狀態、定時時間、開始時間、結束時間、運行時長信息。同時,您可以在操作列下進行查看實例、查看日志操作。 |
字段詳情
為您展示當前字段所在數據表的表詳情,詳情請參見物理表詳情。