查看Spark監控
若您想查看云原生數據倉庫 AnalyticDB MySQL 版集群Spark作業的運行指標,可以參照本文檔的操作步驟,在云監控頁面中查看對應監控項信息,以便您及時掌握集群的性能和運行狀況,排查并解決問題。
前提條件
集群的產品系列為企業版、基礎版或湖倉版。
注意事項
僅支持查看過去一個月內的監控信息,單次查看最長的時間段為31天。
操作步驟
登錄云監控控制臺。
在左側導航欄,選擇
。在云產品監控頁面左側導航欄,選擇數據庫。
在數據庫頁面,選擇云原生數據倉庫AnalyticDB MySQL版3.0 - 湖倉版。
選擇目標集群所在地域。
單擊目標集群操作列的監控圖表。
在Spark指標頁簽下,查看對應監控信息。
監控項說明
監控項 | 單位 | 說明 |
Spark CPU 利用率(%) | % | Spark CPU利用率。 |
Spark 內存 利用率(%) | % | Spark內存使用率。 |
Execution 堆內內存使用量峰值(B) | Byte | Spark作業運行時,占用JVM堆內存的最大值。 |
Execution 堆外內存使用量峰值(B) | Byte | Spark作業運行時,除JVM堆內存外,額外使用內存的最大值。 |
Storage 堆內內存使用量峰值(B) | Byte | Spark存儲數據(例如緩存的RDD)時,在JVM堆內存中占用的最大空間。 |
Storage 堆外內存使用量峰值(B) | Byte | Spark存儲數據(例如緩存的RDD)時,在JVM堆外內存中占用的最大空間。 |
RDD Storage 磁盤使用量(B) | Byte | Spark中RDD(彈性分布式數據集)占用的磁盤空間。 |
Major GC 次數(count) | 數值 | Spark作業運行時,JVM垃圾收集機制執行的老年代垃圾收集(Major GC)的次數。 |
Minor GC 次數統計(count) | 數值 | Spark作業運行時,JVM垃圾收集機制執行的年輕代垃圾收集(Minor GC)的次數。 |
Spark GC 耗時(s) | s | Spark的GC耗時。 |
Spark Shuffle 讀數據量(B) | Byte | Spark Shuffle的讀數據量。 |
Spark Shuffle 寫數據量(B) | Byte | Spark Shuffle的寫數據量。 |
Spark 讀取數據數量(B) | Byte | Spark的讀數據量。 |