日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

自定義血緣配置

Dataphin支持自動解析SQL類型計算任務和邏輯表任務的血緣信息,針對非SQL類型的計算任務,支持自定義配置血緣信息,以補全血緣鏈路。本文為您介紹如何自定義配置非SQL任務的血緣。

使用限制

  • 僅支持針對非SQL類型的計算任務自定義配置血緣關系。

  • 最多配置20個血緣組,每個血緣組內最多分別配置5個輸入及輸出。

血緣配置說明

  • 血緣組&血緣:每個任務支持配置多個血緣組。血緣組內的每個輸入和輸出一一對應生成血緣關系,血緣組之間彼此獨立。每個輸入輸出配置將同時生成表級血緣和字段級血緣。

    例如:輸入表1選擇table A的a字段,輸入表2選擇table B的b字段,輸出表選擇table C的c, d字段,則會生成以下血緣關系:

    • 表級血緣:table A-->table C; table B-->table C。

    • 字段級血緣:table A.a-->table C.c; table B.b-->table C.c; table A.a-->table C.d; table B.b-->table C.d。

  • 支持配置輸入輸出表的所屬環境,如果所屬環境選擇了自動,將在提交和發布階段自動替換環境參數生成對應開發環境和生產環境的血緣。

配置血緣

  1. 在Dataphin首頁的頂部菜單欄中,選擇研發 > 數據研發

  2. 開發頁面的頂部菜單欄選擇項目(Dev-Prod模式需要選擇環境)。

  3. 在左側導航欄中選擇數據處理 > 計算任務

  4. 在計算任務列表中,單擊目標計算任務,打開對應計算任務頁簽。

  5. 單擊頁面右側邊欄的血緣,打開血緣配置面板。

  6. 血緣配置面板中,單擊+新增血緣組,進行輸入與輸出表配置。

    • 輸入表配置

      1. 在血緣組區域內,單擊配置輸入表,打開配置輸入表對話框,在對話框中配置以下參數。image

        參數

        描述

        所屬環境

        輸入輸出表的所屬環境,支持選擇自動開發生產

        • 所屬環境選擇自動,相當于代碼中以空間變量${項目名/板塊名}的方式引用表,可選范圍為開發環境的表。任務提交成功后變量將替換為開發環境表并解析血緣關系,發布成功后將自動替換為對應的生產環境表并解析血緣關系。如果不存在對應的生產表,不阻塞提交發布,但無法解析生產血緣。

        • 所屬環境選擇開發生產,則提交發布時不做變量替換,以配置為準。

        輸入表

        支持的數據表類型包括:物理表、物理視圖、維度邏輯表、事實邏輯表、匯總邏輯表、標簽邏輯表、邏輯視圖。

        選中范圍

        • 全表:以提交發布時對應表的全部字段為準生成血緣關系。

          說明

          血緣僅在配置任務提交和發布成功時更新,后續輸入輸出表結構變更不會自動觸發血緣更新。

        • 指定字段:根據業務需要選擇對應表中的指定字段。

      2. 單擊確定,完成輸入表配置。

    • 配置輸出表

      1. 在血緣組區域內,單擊配置輸出表,打開配置輸出表對話框,在對話框中配置相關參數。

        輸出表與輸入表所需配置的參數相同。

      2. 單擊確定,完成輸出表配置。

  7. 各血緣組的輸入表和輸出表配置均完成后,單擊血緣配置面板中的確定,完成血緣的配置。

提交并發布血緣

  1. 血緣配置完成后,單擊當前計算任務代碼編輯區域上方的提交

  2. 提交詳情對話框中,單擊確認并提交

  3. 提交詳情對象檢查步驟中,將會校驗血緣配置中引用的輸入輸出表及字段是否存在。

    說明
    • 血緣配置僅在提交環節進行對象檢查,發布環境不做額外檢查。

    • 系統在任務提交時,解析開發環境的表和字段血緣關系;發布時,解析生產環境的表和字段血緣關系。單個任務提交或發布時支持解析不超過10萬條血緣關系,超過則不予記錄,在資產目錄中無法展示。

    image

查看血緣

任務提交發布完成后,您可以在數據表詳情頁面查看自定義配置的表級和字段級血緣關系,詳情請參見物理表詳情