本文介紹通過運維中心可以查看作業概覽,監控任務運行狀態,管理流式作業和查看審計日志,便于對作業的管理和運維。

前提條件

已創建項目,詳情請參見新建項目

查看作業概覽

  1. 使用阿里云賬號登錄Databricks數據洞察控制臺
  2. 在Databricks數據洞察控制臺頁面,選擇所在的地域(Region)。
    創建的集群將會在對應的地域內,一旦創建后不能修改。
  3. 在左側導航欄,單擊項目空間
  4. 項目空間頁面,單擊待操作項目所在行的運行記錄
  5. 單擊上方的概覽頁簽。
    展示當前項目下的作業數量、作業類型分布圖和最近24小時作業狀態分布情況 。

管理作業運行記錄

  1. 使用阿里云賬號登錄Databricks數據洞察控制臺
  2. 在Databricks數據洞察控制臺頁面,選擇所在的地域(Region)。
    創建的集群將會在對應的地域內,一旦創建后不能修改。
  3. 在左側導航欄,單擊項目空間
  4. 項目空間頁面,單擊待操作項目所在行的運行記錄
    下方列表展示當前項目下所有作業的運行情況。還可以通過條件搜索具體的作業。
    • 單擊詳情,可查看所選作業的詳細信息,包括作業實例信息、提交日志、YARN容器列表、審計日志和數據流監控。
    • 單擊啟動停止,可啟動或是停止所選的作業。

管理流式作業

  1. 使用阿里云賬號登錄Databricks數據洞察控制臺
  2. 在Databricks數據洞察控制臺頁面,選擇所在的地域(Region)。
    創建的集群將會在對應的地域內,一旦創建后不能修改。
  3. 在左側導航欄,單擊項目空間
  4. 項目空間頁面,單擊待操作項目所在行的運行記錄
  5. 單擊上方的流式作業頁簽。
    • 單擊詳情,可查看所選Spark Streaming作業的詳細信息,包括作業實例信息、提交日志、YARN容器列表、審計日志和數據流監控。
    • 單擊編輯,可編輯所選作業,詳情請參見管理作業
    • 單擊啟動停止,可啟動或是停止所選的作業。

查看審計日志

  1. 使用阿里云賬號登錄Databricks數據洞察控制臺
  2. 在Databricks數據洞察控制臺頁面,選擇所在的地域(Region)。
    創建的集群將會在對應的地域內,一旦創建后不能修改。
  3. 在左側導航欄,單擊項目空間
  4. 項目空間頁面,單擊待操作項目所在行的運行記錄
  5. 單擊上方的審計日志頁簽。
    可以查看對當前項目空間執行的操作詳情。