查看運(yùn)維大屏
運(yùn)維大屏為您展示工作空間的運(yùn)維穩(wěn)定性評(píng)估、重點(diǎn)關(guān)注的運(yùn)維指標(biāo)、調(diào)度資源使用及周期任務(wù)運(yùn)行概況,以及數(shù)據(jù)集成同步任務(wù)的運(yùn)行詳情,助力您從宏觀角度快速了解空間任務(wù)的整體概況,及時(shí)發(fā)現(xiàn)并處理異常任務(wù),提升運(yùn)維效率。
使用說(shuō)明
運(yùn)維大屏支持選擇使用如下兩種視角查看工作空間的整體運(yùn)維概覽及數(shù)據(jù)集成任務(wù)運(yùn)維概況:
指定項(xiàng)目:即查看所選工作空間的運(yùn)維概況。該視角可查看工作空間的運(yùn)維概覽,也可單獨(dú)查看數(shù)據(jù)集成同步任務(wù)的運(yùn)維概況。
全部項(xiàng)目:即查看當(dāng)前賬號(hào)下所有工作空間的運(yùn)維概況。該視角無(wú)法單獨(dú)查看數(shù)據(jù)集成同步任務(wù)的運(yùn)維概況。
使用限制
標(biāo)準(zhǔn)模式開(kāi)發(fā)環(huán)境運(yùn)維中心不支持運(yùn)維大屏功能。標(biāo)準(zhǔn)模式工作空間可在運(yùn)維中心界面頂部菜單欄左側(cè)切換生產(chǎn)環(huán)境及開(kāi)發(fā)環(huán)境。
運(yùn)維概覽頁(yè)面僅統(tǒng)計(jì)周期任務(wù)及周期實(shí)例的相關(guān)運(yùn)維情況,不包括其它類(lèi)型的任務(wù)和實(shí)例。
進(jìn)入運(yùn)維大屏
登錄DataWorks控制臺(tái),切換至目標(biāo)地域后,單擊左側(cè)導(dǎo)航欄的 ,在下拉框中選擇對(duì)應(yīng)工作空間后單擊進(jìn)入運(yùn)維中心。
查看運(yùn)維概覽
運(yùn)維概覽頁(yè)面通過(guò)整體運(yùn)維穩(wěn)定性、異常運(yùn)維問(wèn)題、周期實(shí)例及周期任務(wù)運(yùn)行、資源組使用、實(shí)例運(yùn)行及出錯(cuò)情況排行榜等維度,為您介紹工作空間中的運(yùn)維概況。
整體運(yùn)維狀態(tài)評(píng)估
通過(guò)工作空間中任務(wù)的整體運(yùn)行情況,為您工作空間的運(yùn)維穩(wěn)定性進(jìn)行了狀態(tài)評(píng)估。穩(wěn)定性的健康程度分為優(yōu)、良、中、差四個(gè)等級(jí),當(dāng)出現(xiàn)高危或低危標(biāo)簽時(shí),表示工作空間的健康程度較差,需盡快處理優(yōu)化。通過(guò)我的全部項(xiàng)目視角下,可查看當(dāng)前所有已加入的空間運(yùn)維穩(wěn)定性情況、周期實(shí)例數(shù)、及周期實(shí)例完成情況。
查看重點(diǎn)關(guān)注
重點(diǎn)關(guān)注以智能基線及周期任務(wù)相關(guān)異常統(tǒng)計(jì)為維度,統(tǒng)計(jì)空間視角和個(gè)人視角下任務(wù)運(yùn)維的異常事項(xiàng)。您可查看工作空間整體的異常問(wèn)題情況,或僅查看您名下的異常問(wèn)題(即您作為任務(wù)責(zé)任人的異常任務(wù))概況,及時(shí)發(fā)現(xiàn)并治理,以免影響業(yè)務(wù)正常運(yùn)行。通常,異常問(wèn)題分為如下幾類(lèi):
異常問(wèn)題類(lèi)型 | 異常問(wèn)題說(shuō)明 | 相關(guān)文檔 |
基線實(shí)例破線 | 統(tǒng)計(jì)今日破線的基線實(shí)例數(shù)量。基線實(shí)例破線,即基線上的任務(wù)預(yù)計(jì)完成時(shí)間超過(guò)基線的承諾時(shí)間,未按指定時(shí)間運(yùn)行完成導(dǎo)致觸發(fā)報(bào)警。 | |
基線實(shí)例預(yù)警 | 統(tǒng)計(jì)今日預(yù)警的基線實(shí)例數(shù)量。預(yù)警余量能保障復(fù)雜依賴場(chǎng)景下重要數(shù)據(jù)在預(yù)期時(shí)間內(nèi)順利產(chǎn)出,超出預(yù)警余量,可能導(dǎo)致任務(wù)無(wú)法按時(shí)完成造成異常。 | |
運(yùn)行出錯(cuò)事件 | 統(tǒng)計(jì)今日運(yùn)行出錯(cuò)的事件數(shù)量。當(dāng)任務(wù)處于基線監(jiān)控范圍內(nèi),任務(wù)運(yùn)行出錯(cuò)會(huì)產(chǎn)生出錯(cuò)事件。當(dāng)前任務(wù)運(yùn)行出錯(cuò),可能會(huì)阻塞其相關(guān)下游任務(wù)運(yùn)行,您需及時(shí)處理出錯(cuò)任務(wù),以免影響下游任務(wù)正常運(yùn)行。 | |
運(yùn)行變慢事件 | 統(tǒng)計(jì)今日運(yùn)行變慢的事件數(shù)量。當(dāng)任務(wù)處于基線監(jiān)控范圍內(nèi),任務(wù)運(yùn)行變慢會(huì)產(chǎn)生變慢事件。運(yùn)行變慢即任務(wù)本次運(yùn)行時(shí)間相比過(guò)去一段時(shí)間內(nèi)的平均運(yùn)行時(shí)間明顯變長(zhǎng)。 | |
任務(wù)被孤立 | 統(tǒng)計(jì)周期任務(wù)中沒(méi)有上游依賴的周期任務(wù)個(gè)數(shù)。當(dāng)節(jié)點(diǎn)沒(méi)有上游依賴時(shí),該節(jié)點(diǎn)會(huì)變?yōu)楣铝⒐?jié)點(diǎn),將無(wú)法再自動(dòng)調(diào)度運(yùn)行。 | |
任務(wù)被凍結(jié) | 統(tǒng)計(jì)凍結(jié)(暫停)狀態(tài)的周期任務(wù)個(gè)數(shù)。周期任務(wù)凍結(jié)后,該周期任務(wù)產(chǎn)生的實(shí)例也將是凍結(jié)狀態(tài),凍結(jié)狀態(tài)的實(shí)例將不會(huì)運(yùn)行,并且會(huì)阻塞其下游節(jié)點(diǎn)執(zhí)行。 | |
任務(wù)過(guò)期 | 統(tǒng)計(jì)調(diào)度生效日期已過(guò)的周期任務(wù)個(gè)數(shù)。節(jié)點(diǎn)在調(diào)度生效日期內(nèi)將自動(dòng)產(chǎn)生周期實(shí)例并運(yùn)行,調(diào)度生效日期范圍外將無(wú)法產(chǎn)生周期實(shí)例并自動(dòng)調(diào)度。 | 無(wú) |
任務(wù)被修改 | 今日修改的周期調(diào)度任務(wù)個(gè)數(shù)。
說(shuō)明 當(dāng)切換至我的視角下時(shí),則統(tǒng)計(jì)的是我名下任務(wù)(即您為該任務(wù)的責(zé)任人)存在變更的節(jié)點(diǎn)數(shù)量。 | 無(wú) |
周期實(shí)例及周期任務(wù)運(yùn)維概況
周期實(shí)例及周期任務(wù)的相關(guān)運(yùn)維概況如下表。
運(yùn)維類(lèi)別 | 說(shuō)明 | 圖示 |
周期實(shí)例運(yùn)行狀態(tài)分布 | 統(tǒng)計(jì)指定業(yè)務(wù)日期,當(dāng)前工作空間下調(diào)度實(shí)例,即周期實(shí)例或您名下調(diào)度實(shí)例的運(yùn)行狀態(tài)分布情況。統(tǒng)計(jì)的是頁(yè)面請(qǐng)求發(fā)生時(shí)的數(shù)據(jù)。單擊餅圖中的某個(gè)色塊,即可查看相應(yīng)狀態(tài)的實(shí)例數(shù)量及占比。 需重點(diǎn)關(guān)注如下?tīng)顟B(tài)實(shí)例,以免影響業(yè)務(wù)正常運(yùn)行:
說(shuō)明 此處僅統(tǒng)計(jì)正常任務(wù),不統(tǒng)計(jì)空跑和凍結(jié)狀態(tài)的任務(wù)。 | |
周期實(shí)例完成情況 | 統(tǒng)計(jì)頁(yè)面請(qǐng)求當(dāng)天 說(shuō)明 此處的歷史平均統(tǒng)計(jì)的是近10天的實(shí)例完成情況。 | |
周期實(shí)例與周期任務(wù)趨勢(shì) | 統(tǒng)計(jì)某段業(yè)務(wù)日期范圍內(nèi),生產(chǎn)環(huán)境的周期任務(wù)、周期實(shí)例的數(shù)量變化趨勢(shì)。最多支持查看近一年的調(diào)度任務(wù)數(shù)量變化。 說(shuō)明 此處時(shí)間是根據(jù)業(yè)務(wù)日期(即昨天)進(jìn)行選擇的,即如需查看今天周期實(shí)例或周期任務(wù)的完成情況,時(shí)間需選擇為昨天。 | |
周期任務(wù)分布情況 | 統(tǒng)計(jì)頁(yè)面請(qǐng)求發(fā)生時(shí),不同節(jié)點(diǎn)類(lèi)型、優(yōu)先級(jí)、責(zé)任人、調(diào)度周期維度的周期任務(wù)數(shù)量及占比。餅圖的展示存在上限,若統(tǒng)計(jì)類(lèi)型超過(guò)上限,會(huì)進(jìn)行合并展示。 說(shuō)明 我的全部項(xiàng)目視角下,支持按照工作空間查看周期任務(wù)分布情況。 |
調(diào)度資源組使用情況
統(tǒng)計(jì)指定時(shí)間段內(nèi)所選調(diào)度資源組的使用率(即運(yùn)行在該資源組上的實(shí)例所占用資源的百分比)與各時(shí)間點(diǎn)運(yùn)行在該資源組上的實(shí)例數(shù)量的變化趨勢(shì)。當(dāng)資源組使用率超過(guò)80%時(shí),建議對(duì)資源組進(jìn)行擴(kuò)容,以免資源不足,影響任務(wù)正常執(zhí)行。
最多支持統(tǒng)計(jì)7天的數(shù)據(jù)。
資源組使用率與資源組上運(yùn)行的實(shí)例數(shù)量的統(tǒng)計(jì)維度為資源組級(jí)別。例如,若您使用的獨(dú)享調(diào)度資源組為多個(gè)工作空間共享,則此處統(tǒng)計(jì)的為多個(gè)工作空間下,該資源組總的資源使用率和實(shí)例數(shù)量變化趨勢(shì)。
周期實(shí)例運(yùn)行排行及出錯(cuò)排行
昨日周期實(shí)例排行榜
統(tǒng)計(jì)昨天運(yùn)行時(shí)長(zhǎng)、等資源時(shí)長(zhǎng)和運(yùn)行變慢時(shí)長(zhǎng)的周期實(shí)例排行,目前僅展示Top30的任務(wù)。您可根據(jù)排行快速查找耗時(shí)較久的任務(wù),并單擊實(shí)例ID進(jìn)入實(shí)例詳情頁(yè),通過(guò)運(yùn)行診斷查看當(dāng)前實(shí)例的運(yùn)行詳情。
說(shuō)明變慢時(shí)長(zhǎng):即昨日該實(shí)例運(yùn)行時(shí)長(zhǎng)相比歷史平均運(yùn)行時(shí)長(zhǎng)變慢多少,并按照差值降序排序。
周期實(shí)例近一個(gè)月出錯(cuò)排行榜
統(tǒng)計(jì)最近一個(gè)月的周期實(shí)例出錯(cuò)排行,目前僅展示Top30的任務(wù)。您可快速定位近一個(gè)月出錯(cuò)率較高的任務(wù),查看任務(wù)詳情并定位出錯(cuò)原因。
查看數(shù)據(jù)集成任務(wù)運(yùn)維
您可在數(shù)據(jù)集成頁(yè)簽,查看昨天或今天數(shù)據(jù)集成同步任務(wù)的相關(guān)概況及資源組的使用情況。
數(shù)據(jù)集成資源組使用情況
統(tǒng)計(jì)當(dāng)前工作空間下所有數(shù)據(jù)集成任務(wù)使用的資源詳情,包括運(yùn)行任務(wù)數(shù)、資源使用率、到期時(shí)間等。根據(jù)資源組使用率及任務(wù)量,判斷是否需要對(duì)資源進(jìn)行擴(kuò)縮容等操作,合理分配資源。
獨(dú)享數(shù)據(jù)集成資源組的相關(guān)操作,詳情請(qǐng)參見(jiàn)獨(dú)享數(shù)據(jù)集成資源組。
Serverless資源組的相關(guān)操作,詳情請(qǐng)參見(jiàn)使用Serverless資源組。
僅統(tǒng)計(jì)對(duì)獨(dú)享數(shù)據(jù)集成資源組的相關(guān)運(yùn)維情況。
數(shù)據(jù)集成同步任務(wù)運(yùn)行狀態(tài)分布
使用餅圖統(tǒng)計(jì)當(dāng)前工作空間下,同步任務(wù)不同運(yùn)行狀態(tài)的分布情況。單擊不同色塊,即可跳轉(zhuǎn)至相應(yīng)狀態(tài)任務(wù)的詳情頁(yè),查看并處理問(wèn)題任務(wù)。您需重點(diǎn)關(guān)注異常及運(yùn)行失敗的任務(wù),該類(lèi)任務(wù)通常會(huì)阻塞下游任務(wù)執(zhí)行。
離線同步任務(wù)運(yùn)行情況
離線同步任務(wù)運(yùn)行情況介紹如下表。
運(yùn)維類(lèi)別 | 說(shuō)明 | 圖示 |
數(shù)據(jù)同步進(jìn)度 | 統(tǒng)計(jì)所選業(yè)務(wù)日期內(nèi)離線同步的數(shù)據(jù)總量及總的流量使用情況。 | |
數(shù)據(jù)同步量 | 根據(jù)數(shù)據(jù)源類(lèi)型展示所選業(yè)務(wù)日期內(nèi),同步數(shù)據(jù)量的拉取和寫(xiě)入曲線,快速查看同步數(shù)據(jù)量較大的引擎任務(wù),后續(xù)可考慮向該類(lèi)引擎任務(wù)進(jìn)行資源傾斜。 | |
數(shù)據(jù)同步榜單 | 統(tǒng)計(jì)最近10個(gè)最新失敗實(shí)例和最新成功實(shí)例,以便您全局查看最新的同步任務(wù)狀態(tài)。您可根據(jù)報(bào)錯(cuò)信息,快速定位實(shí)例運(yùn)行失敗的原因并處理。 | |
數(shù)據(jù)同步任務(wù)詳情 | 支持通過(guò)提交時(shí)間、任務(wù)狀態(tài)和任務(wù)名稱(chēng)等條件篩選,快速搜索任務(wù)實(shí)例,查看該實(shí)例的運(yùn)行詳情。 |
實(shí)時(shí)同步任務(wù)運(yùn)行情況
實(shí)時(shí)同步任務(wù)運(yùn)行情況介紹如下表。
運(yùn)維類(lèi)別 | 說(shuō)明 | 圖示 |
數(shù)據(jù)同步概覽 | 統(tǒng)計(jì)當(dāng)前工作空間下,所有實(shí)時(shí)同步任務(wù)的數(shù)據(jù)速度和記錄速度的總和。 | |
數(shù)據(jù)同步任務(wù)延遲情況 | 統(tǒng)計(jì)存在延遲最高的10個(gè)實(shí)時(shí)同步任務(wù),以便快速定位高延遲任務(wù)并及時(shí)優(yōu)化。 | |
數(shù)據(jù)同步任務(wù)報(bào)警信息 | 統(tǒng)計(jì)最近時(shí)間實(shí)時(shí)同步任務(wù)運(yùn)行產(chǎn)生的報(bào)警信息,以便您快速捕捉異常情況并及時(shí)解決。 | |
數(shù)據(jù)同步任務(wù)Failover信息 | 統(tǒng)計(jì)實(shí)時(shí)同步任務(wù)在指定時(shí)間內(nèi)的Failover消息,以便總覽任務(wù)Failover的狀態(tài)。Failover詳情請(qǐng)參見(jiàn)實(shí)時(shí)同步任務(wù)運(yùn)行與管理。 |