配置離線管道調(diào)度依賴
Dataphin通過各個(gè)節(jié)點(diǎn)的調(diào)度依賴配置結(jié)果,有序的運(yùn)行業(yè)務(wù)流程中各個(gè)節(jié)點(diǎn),保障業(yè)務(wù)數(shù)據(jù)有效、適時(shí)地產(chǎn)出。本文為您介紹周期離線管道調(diào)度依賴配置說明。
操作步驟
請(qǐng)參見,進(jìn)入離線集成任務(wù)屬性面板。
在調(diào)度依賴區(qū)域,配置集成任務(wù)調(diào)度依賴參數(shù)。
上游依賴
自動(dòng)解析
集成任務(wù)上游依賴,您可以單擊自動(dòng)解析,Dataphin將根據(jù)集成任務(wù)自動(dòng)解析獲取上游任務(wù)和輸出表。解析后將在上游依賴列表中添加解析出來的全部依賴表。您可查看解析出的依賴表詳情或進(jìn)行編輯和刪除操作。更多信息,請(qǐng)參見自動(dòng)解析流程。
說明自動(dòng)解析出的輸入表如果存在多個(gè)產(chǎn)出任務(wù), 默認(rèn)將所有產(chǎn)出任務(wù)作為上游依賴。
解析出的所有依賴表,依賴周期默認(rèn)為本周期。
添加根節(jié)點(diǎn)
若任務(wù)無對(duì)應(yīng)上游依賴時(shí),您可單擊添加根節(jié)點(diǎn)作為當(dāng)前任務(wù)的上游依賴。
說明每個(gè)租戶或企業(yè)在初始化時(shí)都會(huì)有一個(gè)以virtual_root_node開頭的虛擬根節(jié)點(diǎn)。
添加本節(jié)點(diǎn)上周期
即該節(jié)點(diǎn)任務(wù)的調(diào)度需要依賴于本節(jié)點(diǎn)上一周期(前1天或前n小時(shí))運(yùn)行成功。
添加依賴
若自動(dòng)解析無法解析出調(diào)度依賴關(guān)系或自動(dòng)解析生成的上游依賴配置與實(shí)際應(yīng)用不符時(shí),您可手動(dòng)單擊+添加依賴添加節(jié)點(diǎn)的上游依賴。
添加物理-節(jié)點(diǎn)依賴
區(qū)域
描述
①搜索與篩選區(qū)
您可在搜索與篩選區(qū)中根據(jù)支持的篩選條件篩選您所需依賴的物理表節(jié)點(diǎn)。支持的篩選條件包括本項(xiàng)目、項(xiàng)目、節(jié)點(diǎn)類型以及輸入節(jié)點(diǎn)名稱或輸出表名進(jìn)行篩選。
②節(jié)點(diǎn)列表
節(jié)點(diǎn)列表為您展示可依賴的物理節(jié)點(diǎn),您可根據(jù)您的需求進(jìn)行選擇。
③依賴周期
支持依賴本周期和上周期。
本周期:即節(jié)點(diǎn)任務(wù)的調(diào)度依賴于所選節(jié)點(diǎn)本周期的運(yùn)行成功。
上周期:即節(jié)點(diǎn)任務(wù)的調(diào)度依賴于所選節(jié)點(diǎn)的上一周期((前 1 天或前 n 小時(shí))運(yùn)行成功。
添加依賴-邏輯表節(jié)點(diǎn)
區(qū)域
描述
①搜索與篩選區(qū)
您可在搜索與篩選區(qū)中根據(jù)支持的篩選條件篩選您所需依賴的邏輯表節(jié)點(diǎn)。支持的篩選條件包括邏輯表類型、所屬的板塊以及輸入邏輯表名進(jìn)行篩選。
②節(jié)點(diǎn)列表
節(jié)點(diǎn)列表為您展示可依賴的邏輯表節(jié)點(diǎn),您可根據(jù)您的需求進(jìn)行選擇。
若您需依賴邏輯表中某些字段,非整個(gè)邏輯表。您可在節(jié)點(diǎn)列表的依賴字段欄單擊可查看邏輯表所擁有的表字段,您可根據(jù)您的需求進(jìn)行選擇。如下圖所示:
③依賴周期
支持依賴本周期和上周期。
本周期:即節(jié)點(diǎn)任務(wù)的調(diào)度依賴于所選節(jié)點(diǎn)本周期的運(yùn)行成功。
上周期:即節(jié)點(diǎn)任務(wù)的調(diào)度依賴于所選節(jié)點(diǎn)的上一周期(前1天或前n小時(shí))運(yùn)行成功。
本節(jié)點(diǎn)輸出
系統(tǒng)將為您所創(chuàng)建的節(jié)點(diǎn)自動(dòng)生成輸出名,若您需添加多個(gè)輸出名,您可單擊自動(dòng)生成輸出名。
重要系統(tǒng)使用輸出名構(gòu)建調(diào)度依賴圖,系統(tǒng)將自動(dòng)生成輸出名,不建議人工干預(yù)設(shè)置。
單擊保存。