日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

節點調度配置

更新時間: 2024-12-20 17:44:51

若任務需要周期性調度運行,您需定義該任務的調度相關屬性,包括調度周期、調度依賴、調度參數等。本文為您介紹調度配置的相關內容。

前提條件

  • 已創建節點。DataWorks基于節點進行任務開發,不同類型的引擎任務在DataWorks上被封裝為不同類型的節點,您可根據業務需要,選擇合適的節點使用。詳情請參見通用開發流程

  • 已開啟工作空間調度開關。僅當DataWorks工作空間開啟啟用調度周期開關后,工作空間中的任務才可以根據其配置自動調度運行。您需進入工作空間的調度設置頁面,開啟相應開關,詳情請參見調度設置

注意事項

  • 任務的調度配置僅用于定義任務調度運行時的相關屬性,任務需通過發布流程發布至生產環境后,才會根據該配置進行最終調度。

  • 調度時間僅定義任務預期執行時間,其實際執行時間還受上游執行情況控制,關于任務執行條件說明,詳情請參見任務運行診斷

  • DataWorks支持多種類型任務互相依賴,操作前,建議您先查看必讀:復雜依賴場景調度配置原則與示例文檔了解DataWorks在該場景下預設依賴的情況。

  • DataWorks上,調度任務會根據調度類型及周期數生成相應的實例(例如,小時調度任務每天會根據周期數產生相應數量的小時實例),并通過周期實例的方式自動調度運行該任務。

  • 在使用調度參數的情況下,DataWorks調度任務各周期代碼入參由該周期對應的定時時間以及您調度參數表達式最終決定。各周期代碼入參與調度參數配置與替換的關系,調度參數支持的格式

進入調度配置頁面

  1. 進入數據開發頁面。

    登錄DataWorks控制臺,切換至目標地域后,單擊左側導航欄的數據開發與治理 > 數據開發,在下拉框中選擇對應工作空間后單擊進入數據開發

  2. 進入調度配置頁面。

    1. 在數據開發(DataStudio)界面,您需找到目標節點,進入該節點的編輯頁面。

    2. 單擊節點編輯頁面右側導航欄的調度配置,進入節點調度配置頁面。

配置節點調度屬性

在節點的調度配置頁面,您需根據下表配置節點的調度屬性。

配置項

說明

基礎屬性

包括節點的名稱、ID、類型、責任人等。

  • 節點ID:該節點的唯一標識,將在節點提交后生成。

  • 責任人:默認為節點的創建人。您也可選擇當前工作空間中的成員作為責任人。

(可選)參數

用于定義節點調度時使用的參數。DataWorks提供內置參數及自定義參數,可供任務在調度時實現參數動態賦值。

說明

若您在編輯節點代碼時,在代碼中定義了變量,需在此處對該變量進行賦值。

時間屬性

DataWorks上任務調度將通過生成對應實例來執行,此處用于定義任務在生產環境的周期調度方式。

  • 實例生成方式:定義該任務在生產環境生成實例的時間。

  • 調度類型:定義該任務在生產環境的運行狀態。

  • 調度日歷:用于定義任務調度日期及調度方式。DataWorks為您提供了通用場景的默認日歷,同時,為滿足更靈活的調度時間配置需求,也支持您自定義調度日歷。自定義調度日歷,詳情請參見配置調度日歷

  • 調度周期:定義該任務的調度頻率,即多久執行一次任務。

  • 定時調度時間:定義該任務預期的運行時間。

  • 超時定義:定義該任務執行超過多長時間會自動退出。

  • 重跑屬性:定義該任務自動調度時是否可重跑。

  • 出錯自動重跑:定義該任務自動調度失敗且可重跑時,自動重跑的頻率。

  • 生效日期:定義該任務在什么時間段內調度。超過生效日期的任務將不再生成實例。

資源屬性

用于定義該任務發布至生產環境調度運行時使用的調度資源組。

調度依賴

用于定義該任務的上下游依賴關系。通過依賴關系有序調度運行上下游節點,即當上游節點運行成功后,下游節點才會啟動運行,保障適時的產出有效業務數據。您可使用自動解析快速設置節點依賴,也可手動設置節點的依賴關系。

  • 當節點為業務流程的根節點,或該節點無其他節點依賴時,若您希望快速發布調度任務,可選擇設置該節點依賴工作空間根節點。

  • 當業務流程包含多個輸入或多個輸出,或工作空間業務較復雜時,可選擇使用虛擬節點統籌管理業務流程。例如,通過虛擬節點來控制該業務流程的調度時間。

說明
  • 當您的節點屬于同一個業務流程時,也可通過業務流程面板,使用手動拉線方式設置各個節點的依賴關系。

  • 工作空間創建成功后,平臺將自動生成一個工作空間根節點(即Root虛擬節點)。通常,您可將該節點作為整體調度業務流程運行的起始節點。

    • 該節點的命名格式為工作空間名稱_root

    • 該節點會在工作空間創建成功后的第二天00:00點定時運行。

    • 該節點運行時會空跑(即平臺直接返回運行成功,不會真實執行任務),不占用調度資源,不收取任何費用。

    虛擬節點介紹,請參見虛擬節點;節點空跑說明,請參見空跑

(可選)節點上下文

用于定義上下游任務間的參數傳遞,定義后,可在下游節點中使用該參數獲取上游節點傳遞過來的值。

后續:提交并測試運行節點

任務調度屬性配置完成后,您可提交節點并根據需要測試運行節點的調度配置是否符合預期,詳情請參見任務調試流程。調試無誤后,可將節點發布至生產環境進行周期性調度。后續可在生產環境進行任務的相關運維操作,詳情請參見周期任務基本運維操作

上一篇: 代碼評審 下一篇: 配置基礎屬性
阿里云首頁 大數據開發治理平臺 DataWorks 相關技術圈