周期任務(wù)通用運維概述
周期任務(wù)是指調(diào)度系統(tǒng)按照調(diào)度配置自動定時運行的任務(wù)。本文為您介紹周期的腳本任務(wù)、明細及匯總表(維度邏輯表、事實邏輯表、匯總邏輯表)任務(wù)的通用功能,包括使用說明,支持的調(diào)度類型和相關(guān)功能說明。
使用說明
僅生產(chǎn)環(huán)境運維中心支持自動調(diào)度生成的周期實例,開發(fā)環(huán)境運維中心雖會生成自動調(diào)度的周期實例,但不支持自動調(diào)度。
周期任務(wù)頁面入口
在Dataphin首頁,單擊頂部菜單欄的研發(fā)。默認進入數(shù)據(jù)開發(fā)頁面。
按照以下操作指引,進入周期任務(wù)頁面。
依次單擊運維->周期任務(wù)。
周期任務(wù)頁面介紹
周期任務(wù)頁面主要由搜索及篩選區(qū)、篩選區(qū)、周期任務(wù)列表、批量操作區(qū)組成。您可以在周期任務(wù)頁面對提交的周期任務(wù)進行相關(guān)的運維操作。
區(qū)域 | 描述 |
①篩選及搜索區(qū) | 快捷篩選支持通過輸入節(jié)點ID或節(jié)點名稱來篩選周期任務(wù),適用于知曉節(jié)點ID或節(jié)點名稱時進行快捷篩選出所需的周期任務(wù)。 同時支持勾選我的任務(wù)、已暫停任務(wù)、空跑調(diào)度任務(wù)進行快捷篩選。
|
②篩選區(qū) | 單擊,可展開粒度篩選區(qū)。支持篩選項包括:
如果您需要重新篩選,則可單擊重置,即可快速清空所有篩選條件,恢復系統(tǒng)默認。 |
③周期任務(wù)列表區(qū) | 周期任務(wù)頁面以列表形式為您展示提交到運維中心的周期任務(wù)。列表操作欄為您展示周期任務(wù)支持的運維管理操作。各周期任務(wù)類型支持的運維操作詳情如下:
|
④批量操作區(qū) | 您可通過批量操作區(qū)域提供的批量操作功能,批量對周期任務(wù)進行批量處理,提高操作效率。
|
調(diào)度方式說明
標識 | 調(diào)度狀態(tài) | 描述 |
無 | 正常調(diào)度 | 按照配置的調(diào)度周期和起調(diào)時間,并正常執(zhí)行。 |
空跑調(diào)度 | 按照調(diào)度周期的時間配置調(diào)度,但都是空跑執(zhí)行,即一調(diào)度到該任務(wù)便直接返回成功,沒有真正的執(zhí)行任務(wù)。 | |
暫停調(diào)度 | 暫停調(diào)度的任務(wù)生成的實例均為暫停調(diào)度狀態(tài),可通過恢復操作使實例恢復運行。暫停適用于有些任務(wù)及其下游任務(wù)暫時不需要運行,后面還會繼續(xù)使用的場景,例如臨時調(diào)整一些計算口徑,防止影響下游數(shù)據(jù)。 詳細說明如下:
|
周期任務(wù)DAG圖
單擊周期任務(wù)操作列表任務(wù)對象名稱,頁面右側(cè)為您展示以當前節(jié)點為中心節(jié)點的DAG圖。DAG圖支持可視化動態(tài)呈現(xiàn)該節(jié)點的上下游依賴關(guān)系,默認展示Main節(jié)點(選中節(jié)點)及上下游第一層節(jié)點。如果周期任務(wù)沒有上下游節(jié)點,則DAG圖僅展示當前Main節(jié)點。同時系統(tǒng)支持對上下游節(jié)點進行運維和管理。
同時,您也可以調(diào)整DAG圖頁面范圍:
單擊圖標,隱藏實時實例列表,放大DAG圖。
單擊圖標,隱藏DAG圖。
鼠標懸停至圖標拖動,以擴大或縮小DAG圖的頁面范圍。
以下以周期腳本任務(wù)為例:
區(qū)域 | 描述 |
①節(jié)點信息 | 展示當前選中節(jié)點的概要信息。您還可以單擊查看節(jié)點詳情,查看更多節(jié)點信息。
|
②節(jié)點篩選區(qū) | 快捷設(shè)置以Main節(jié)點為中心向上向下的展開層級。當展開節(jié)點較多不便查看時,您可以搜索節(jié)點ID或名稱以快速定位當前DAG圖展示范圍內(nèi)的某個節(jié)點。 |
③調(diào)度依賴關(guān)系圖 | 展示實例的調(diào)度依賴關(guān)系圖,支持向上向下展開更多節(jié)點,同時支持對上下游節(jié)點的運維操作。
|
④畫布調(diào)整區(qū) | 快捷調(diào)整DAG顯示比例,包括設(shè)定顯示比例(默認為100%)、在當前比例基礎(chǔ)上放大(最大200%)、在當前比例基礎(chǔ)上縮小(最小20%)、適應(yīng)畫布和全屏展示。同時,展示當前DAG圖中Main節(jié)點的節(jié)點ID和節(jié)點名稱。 |