離線集成任務(wù)屬性配置概述
對(duì)于離線集成任務(wù),若需要周期性調(diào)度運(yùn)行,您需定義該任務(wù)的調(diào)度相關(guān)屬性,包括調(diào)度周期、調(diào)度依賴、調(diào)度參數(shù)等。本文為您介紹離線任務(wù)屬性與調(diào)度的相關(guān)內(nèi)容。
注意事項(xiàng)
系統(tǒng)僅支持調(diào)度類(lèi)型為周期性節(jié)點(diǎn)的離線集成任務(wù)進(jìn)行調(diào)度配置。
依賴關(guān)系是兩個(gè)或多個(gè)節(jié)點(diǎn)之間的語(yǔ)義連接關(guān)系,同時(shí)上游節(jié)點(diǎn)的狀態(tài)將影響其他下游節(jié)點(diǎn)的運(yùn)行狀態(tài)。
配置了依賴關(guān)系的節(jié)點(diǎn)調(diào)度規(guī)則為:首先,上游節(jié)點(diǎn)運(yùn)行完成后,才能調(diào)度下游節(jié)點(diǎn)。其次,根據(jù)節(jié)點(diǎn)設(shè)定的調(diào)度時(shí)間判斷是否執(zhí)行調(diào)度。
您在設(shè)定的調(diào)度時(shí)間之前提交的調(diào)度配置,會(huì)在設(shè)定的調(diào)度時(shí)間之后生效。而在設(shè)定的調(diào)度時(shí)間之后配置的依賴關(guān)系,只能間隔一天再生成實(shí)例。
任務(wù)的調(diào)度配置僅用于定義任務(wù)調(diào)度運(yùn)行時(shí)的相關(guān)屬性,任務(wù)需通過(guò)發(fā)布流程發(fā)布至生產(chǎn)環(huán)境后,才會(huì)根據(jù)該配置進(jìn)行最終調(diào)度。
調(diào)度時(shí)間僅定義任務(wù)預(yù)期執(zhí)行時(shí)間,其實(shí)際執(zhí)行時(shí)間還受上游執(zhí)行情況控制,關(guān)于任務(wù)執(zhí)行條件說(shuō)明,詳情請(qǐng)參見(jiàn)實(shí)例運(yùn)行診斷。
離線集成任務(wù)屬性入口
在Dataphin首頁(yè),在頂部菜單欄選擇研發(fā) > 數(shù)據(jù)集成。
在集成頁(yè)面的頂部菜單欄選擇項(xiàng)目。
在左側(cè)導(dǎo)航欄中選擇集成 > 離線集成,在離線集成列表中,單擊目標(biāo)任務(wù)名稱。
在該任務(wù)頁(yè)簽下,單擊右側(cè)的屬性,打開(kāi)屬性面板。
配置離線任務(wù)屬性
在離線任務(wù)屬性頁(yè)面,您需根據(jù)下表配置任務(wù)的基本信息與調(diào)度相關(guān)屬性。
配置項(xiàng) | 描述 |
包括任務(wù)名、ID、節(jié)點(diǎn)類(lèi)型、開(kāi)發(fā)負(fù)責(zé)人、運(yùn)維責(zé)任人及描述。
| |
用于定義任務(wù)在生產(chǎn)環(huán)境的周期調(diào)度方式。
| |
用于定義該任務(wù)的上下游依賴關(guān)系。通過(guò)依賴關(guān)系有序調(diào)度運(yùn)行上下游節(jié)點(diǎn),即當(dāng)上游節(jié)點(diǎn)運(yùn)行成功后,下游節(jié)點(diǎn)才會(huì)啟動(dòng)運(yùn)行,保障適時(shí)的產(chǎn)出有效業(yè)務(wù)數(shù)據(jù)。您可使用自動(dòng)解析快速設(shè)置節(jié)點(diǎn)依賴,也可手動(dòng)添加節(jié)點(diǎn)的依賴關(guān)系。 | |
用于定義任務(wù)運(yùn)行超時(shí)時(shí)間和任務(wù)運(yùn)行失敗時(shí)的重跑策略,可杜絕因計(jì)算任務(wù)長(zhǎng)時(shí)間資源占用造成資源浪費(fèi)的同時(shí)提高計(jì)算任務(wù)運(yùn)行的可靠性。 |