查看并管理實(shí)時(shí)實(shí)例
實(shí)時(shí)實(shí)例是實(shí)時(shí)任務(wù)提交到運(yùn)維中心后生成的實(shí)例數(shù)據(jù)。Dataphin支持查看實(shí)時(shí)任務(wù)生成的實(shí)例數(shù)據(jù),同時(shí)支持對(duì)實(shí)時(shí)實(shí)例進(jìn)行運(yùn)維管理,包括查看任務(wù)、查看實(shí)例代碼、查看實(shí)例參數(shù)等。本文為您介紹實(shí)時(shí)實(shí)例的狀態(tài)及如何運(yùn)維管理實(shí)時(shí)實(shí)例。
實(shí)時(shí)實(shí)例頁面入口
在Dataphin首頁,單擊頂部菜單欄的研發(fā)->任務(wù)運(yùn)維。
按照以下操作指引,進(jìn)入實(shí)時(shí)實(shí)例頁面。
選擇項(xiàng)目(Dev-Prod模式需要選擇環(huán)境)->單擊實(shí)時(shí)實(shí)例。
實(shí)時(shí)實(shí)例頁面介紹
實(shí)時(shí)實(shí)例頁面以列表方式,為您展示系統(tǒng)已生成的實(shí)時(shí)實(shí)例。實(shí)時(shí)實(shí)例頁面主要由搜索及篩選區(qū)、實(shí)時(shí)實(shí)例列表、批量操作區(qū)組成。您可以在實(shí)時(shí)實(shí)例頁面進(jìn)行相關(guān)的運(yùn)維操作。
區(qū)域 | 說明 |
①篩選及搜索區(qū) | 支持通過輸入節(jié)點(diǎn)ID或節(jié)點(diǎn)名稱來搜索實(shí)時(shí)實(shí)例,適用于知曉節(jié)點(diǎn)ID或節(jié)點(diǎn)名稱時(shí)進(jìn)行快捷搜索出所需的實(shí)時(shí)實(shí)例。
|
②實(shí)時(shí)實(shí)例列表區(qū) | 實(shí)時(shí)實(shí)例頁面以列表形式為您展示系統(tǒng)已生成的實(shí)時(shí)實(shí)例。列表操作欄為您展示實(shí)時(shí)實(shí)例支持的運(yùn)維管理操作。更多信息,請(qǐng)參見查看實(shí)時(shí)實(shí)例列表。 |
③批量操作區(qū) | 您可通過批量操作區(qū)域提供的暫停、恢復(fù)、重跑、停止、下線運(yùn)維功能,對(duì)實(shí)時(shí)實(shí)例進(jìn)行批量處理,提高操作效率。更多信息,請(qǐng)參見實(shí)時(shí)實(shí)例批量操作。 |
查看實(shí)時(shí)實(shí)例列表
字段 | 說明 |
實(shí)例對(duì)象 | 實(shí)時(shí)任務(wù)提交發(fā)布運(yùn)維中心后即生成一個(gè)實(shí)時(shí)實(shí)例對(duì)象,初始運(yùn)行狀態(tài)為停止,您可以手動(dòng)啟動(dòng)。 |
運(yùn)行狀態(tài) | 該實(shí)例目前的運(yùn)行狀態(tài)包括:?jiǎn)?dòng)中、運(yùn)行中、停止中、停止、運(yùn)行失敗、啟動(dòng)失敗。更多信息,請(qǐng)參見實(shí)時(shí)實(shí)例運(yùn)行狀態(tài)說明。 |
消費(fèi)延時(shí) | 任務(wù)的延遲,即數(shù)據(jù)源消費(fèi)的延遲。 |
資源消耗 | 運(yùn)行該實(shí)例時(shí)消耗的資源。 |
最近操作人 | 最近操作該實(shí)例的賬號(hào)。 |
最近操作時(shí)間 | 最近操作該實(shí)例的時(shí)間。 |
負(fù)責(zé)人 | 任務(wù)的運(yùn)維負(fù)責(zé)人。 |
資源隊(duì)列 | 該實(shí)時(shí)實(shí)例運(yùn)行在哪個(gè)資源隊(duì)列中。僅適用于Alibaba BlinK實(shí)時(shí)引擎。 |
集群 | 該實(shí)時(shí)實(shí)例運(yùn)行在哪個(gè)集群中。僅適用于Ververica Flink實(shí)時(shí)引擎。 |
引擎版本 | 該實(shí)時(shí)實(shí)例運(yùn)行的引擎版本。 |
實(shí)時(shí)實(shí)例運(yùn)行狀態(tài)說明
狀態(tài)標(biāo)識(shí) | 狀態(tài) | 說明 |
已完成 | 對(duì)于有界流數(shù)據(jù),已完成的實(shí)例。 | |
啟動(dòng)中 | 已啟動(dòng)實(shí)例的運(yùn)行,但系統(tǒng)未開始運(yùn)行。 | |
運(yùn)行中 | 正在運(yùn)行中的實(shí)例。 | |
停止中 | 已觸發(fā)停止實(shí)例的操作,系統(tǒng)正在執(zhí)行停止實(shí)例。 | |
停止 | 停止正在運(yùn)行的實(shí)例。 | |
運(yùn)行失敗 | 運(yùn)行失敗的實(shí)例。 | |
啟動(dòng)失敗 | 啟動(dòng)失敗的實(shí)例。 |
實(shí)時(shí)實(shí)例列表支持的操作
操作 | 說明 |
啟動(dòng) | 啟動(dòng)當(dāng)前實(shí)時(shí)實(shí)例。具體操作,請(qǐng)參見啟動(dòng)實(shí)時(shí)實(shí)例。 |
停止 | 停止當(dāng)前運(yùn)行中的實(shí)時(shí)實(shí)例。支持無狀態(tài)停止和保留當(dāng)前狀態(tài)停止兩種停止方式。
說明 Blink實(shí)時(shí)計(jì)算引擎不支持選擇無狀態(tài)停止和保留當(dāng)前狀態(tài)停止。 |
下線 | 下線生產(chǎn)環(huán)境中的實(shí)時(shí)實(shí)例。系統(tǒng)支持下線停止、運(yùn)行失敗、啟動(dòng)失敗的實(shí)時(shí)實(shí)例。 |
查看運(yùn)行分析 | 查看當(dāng)前實(shí)時(shí)實(shí)例的運(yùn)行信息、數(shù)據(jù)曲線、Failover等參數(shù)。 若實(shí)時(shí)實(shí)例為Ververica Flink、Alibaba BlinK實(shí)時(shí)引擎。更多信息,請(qǐng)參見查看作業(yè)詳情。 |
查看實(shí)時(shí)任務(wù) | 進(jìn)入生成當(dāng)前實(shí)例的任務(wù)頁面,查看實(shí)時(shí)任務(wù)詳情。 |
查看實(shí)例代碼 | 查看生成當(dāng)前實(shí)例的任務(wù)代碼。 |
查看實(shí)例參數(shù) | 查看實(shí)例運(yùn)行時(shí)的參數(shù)。例如, |
實(shí)時(shí)實(shí)例DAG圖
單擊實(shí)時(shí)實(shí)例操作列表實(shí)例對(duì)象名稱,頁面右側(cè)為您展示以當(dāng)前節(jié)點(diǎn)為中心節(jié)點(diǎn)的DAG圖,默認(rèn)展開上下各一層的父子節(jié)點(diǎn)的DAG圖。同時(shí),您也可以調(diào)整DAG圖頁面范圍:
單擊圖標(biāo),隱藏實(shí)時(shí)實(shí)例列表,放大DAG圖。
單擊圖標(biāo),隱藏DAG圖。
鼠標(biāo)懸停至圖標(biāo)拖動(dòng),以擴(kuò)大或縮小DAG圖的頁面范圍。
DAG圖支持可視化動(dòng)態(tài)呈現(xiàn)該節(jié)點(diǎn)的上下游依賴關(guān)系,同時(shí)支持對(duì)上下游節(jié)點(diǎn)進(jìn)行運(yùn)維操作:
區(qū)域 | 說明 |
①節(jié)點(diǎn)信息欄 | 展示當(dāng)前選中節(jié)點(diǎn)的概要信息。您還可以單擊查看節(jié)點(diǎn)詳情,查看更多節(jié)點(diǎn)信息。 Ververica Flink實(shí)時(shí)引擎:包括節(jié)點(diǎn)詳情、運(yùn)行日志、操作日志、節(jié)點(diǎn)代碼和任務(wù)參數(shù)。 |
②節(jié)點(diǎn)搜索及篩選區(qū) | 快捷設(shè)置以Main節(jié)點(diǎn)為中心向上向下的展開層級(jí)。當(dāng)展開節(jié)點(diǎn)較多不便查看時(shí),您可以搜索節(jié)點(diǎn)名稱以快速定位當(dāng)前DAG圖展示范圍內(nèi)的某個(gè)節(jié)點(diǎn)。 |
③調(diào)度依賴關(guān)系圖 | 展示實(shí)例的調(diào)度依賴關(guān)系圖,支持向上向下展開更多節(jié)點(diǎn),同時(shí)支持對(duì)上下游節(jié)點(diǎn)的運(yùn)維操作。 |
④畫布調(diào)整區(qū) | 快捷調(diào)整DAG顯示比例,包括設(shè)定顯示比例(默認(rèn)為100%)、在當(dāng)前比例基礎(chǔ)上放大(最大200%)、在當(dāng)前比例基礎(chǔ)上縮小(最小20%)、適應(yīng)畫布和全屏展示。同時(shí),展示當(dāng)前DAG圖中Main節(jié)點(diǎn)的節(jié)點(diǎn)ID和節(jié)點(diǎn)名稱。 |
實(shí)時(shí)實(shí)例DAG節(jié)點(diǎn)支持的操作
操作 | 說明 |
展開父節(jié)點(diǎn) | 展開DAG圖中Main節(jié)點(diǎn)不同層級(jí)的依賴節(jié)點(diǎn)。 |
展開子節(jié)點(diǎn) | |
查看實(shí)時(shí)任務(wù) | 進(jìn)入生成當(dāng)前實(shí)例節(jié)點(diǎn)的任務(wù)節(jié)點(diǎn)DAG圖,查看任務(wù)節(jié)點(diǎn)詳情、上下游節(jié)點(diǎn)信息及對(duì)任務(wù)節(jié)點(diǎn)進(jìn)行運(yùn)維管理等,更多信息,請(qǐng)參見查看并管理實(shí)時(shí)任務(wù)。 |
查看節(jié)點(diǎn)代碼 | 查看生成當(dāng)前實(shí)例的任務(wù)代碼。 |
查看運(yùn)行日志 | 可查看實(shí)例節(jié)點(diǎn)的運(yùn)行日志。同時(shí),若任務(wù)存在臟數(shù)據(jù)時(shí),您可以單擊下載臟數(shù)據(jù)文件,將臟數(shù)據(jù)下載至本地進(jìn)行查看,包括臟數(shù)據(jù)產(chǎn)生時(shí)間、報(bào)錯(cuò)內(nèi)容、報(bào)錯(cuò)原因。文件默認(rèn)保留7天。 |
查看任務(wù)參數(shù) | 查看當(dāng)前實(shí)例節(jié)點(diǎn)的任務(wù)參數(shù)。例如, |
編輯開發(fā)節(jié)點(diǎn) | 進(jìn)入Dev項(xiàng)目下生成當(dāng)前實(shí)例節(jié)點(diǎn)的任務(wù)編輯頁面,編輯該任務(wù)。僅適用于Dev-Prod開發(fā)模式。 |
編輯節(jié)點(diǎn) | 進(jìn)入生成當(dāng)前實(shí)例節(jié)點(diǎn)的任務(wù)編輯頁面,編輯該任務(wù)。僅適用于Basic模式。 |
查看生成節(jié)點(diǎn) | 查看Prod項(xiàng)目中生成當(dāng)前實(shí)例節(jié)點(diǎn)的任務(wù)配置。 |
查看操作日志 | 查看當(dāng)前實(shí)例的操作日志。包括操作時(shí)間,操作人、操作內(nèi)容。 |
查看拓?fù)浣Y(jié)構(gòu) | 查看實(shí)時(shí)實(shí)例的資源組節(jié)點(diǎn)和組件節(jié)點(diǎn)。 |
查看運(yùn)行分析 | 查看當(dāng)前實(shí)時(shí)實(shí)例的運(yùn)行信息、數(shù)據(jù)曲線、Failover等參數(shù)。 若實(shí)時(shí)實(shí)例為Ververica Flink、Alibaba BlinK實(shí)時(shí)引擎。更多信息,請(qǐng)參見查看作業(yè)詳情。 |
啟動(dòng) | 啟動(dòng)當(dāng)前實(shí)時(shí)實(shí)例。具體操作,請(qǐng)參見啟動(dòng)實(shí)時(shí)實(shí)例。 |
停止 | 停止當(dāng)前運(yùn)行中、已完成(僅支持無狀態(tài)停止)的實(shí)時(shí)實(shí)例。包括無狀態(tài)停止和保留當(dāng)前狀態(tài)停止兩種停止方式。
說明 Blink實(shí)時(shí)計(jì)算引擎不支持選擇無狀態(tài)停止和保留當(dāng)前狀態(tài)停止。 |
下線 | 下線生產(chǎn)環(huán)境中的實(shí)時(shí)實(shí)例。系統(tǒng)支持下線已停止、運(yùn)行失敗或啟動(dòng)失敗的實(shí)時(shí)實(shí)例。 |
實(shí)時(shí)實(shí)例批量操作
操作 | 說明 |
啟動(dòng) | 批量啟動(dòng)當(dāng)前勾選的實(shí)時(shí)實(shí)例。具體操作,請(qǐng)參見啟動(dòng)實(shí)時(shí)實(shí)例。 說明 實(shí)時(shí)集成任務(wù)不支持批量啟動(dòng)。 |
停止 | 批量停止當(dāng)前運(yùn)行中,已完成(僅支持無狀態(tài)停止)的實(shí)時(shí)實(shí)例。包括無狀態(tài)停止和保留當(dāng)前狀態(tài)停止兩種停止方式。
說明 Blink實(shí)時(shí)計(jì)算引擎不支持選擇無狀態(tài)停止和保留當(dāng)前狀態(tài)停止。 |
下線 | 下線當(dāng)前選中的生產(chǎn)環(huán)境中的實(shí)時(shí)實(shí)例。系統(tǒng)支持下線停止、運(yùn)行失敗或啟動(dòng)失敗的實(shí)時(shí)實(shí)例。 |