計算任務資源配置
您可以為計算任務配置所屬資源組,任務調(diào)度時將使用該資源組資源進行任務調(diào)度。本文將為您介紹如何配置計算任務調(diào)度資源。
操作步驟
在Dataphin首頁的頂部菜單欄中,選擇研發(fā) > 數(shù)據(jù)研發(fā)。
在開發(fā)頁面的頂部菜單欄選擇項目(Dev-Prod模式需要選擇環(huán)境)。
在左側(cè)導航欄中選擇數(shù)據(jù)處理 > 計算任務。
在計算任務列表中,單擊目標計算任務,打開對應計算任務頁簽。
單擊頁面右側(cè)邊欄的屬性,打開屬性面板,并在資源配置區(qū)域內(nèi)配置以下參數(shù)。
開發(fā)任務調(diào)度資源組、生產(chǎn)任務調(diào)度資源組:
項目為Dev-Prod模式時,支持配置開發(fā)任務調(diào)度資源組和生產(chǎn)任務調(diào)度資源組;項目為Basic模式時,僅支持配置生產(chǎn)任務調(diào)度資源組。
任務調(diào)度運行時需要消耗調(diào)度資源。您可指定每個任務生成的實例可使用的調(diào)度資源組,實例調(diào)度時會占用指定資源組的資源配額,如果指定的資源組可用資源不足,則會進入等待調(diào)度資源狀態(tài)。不同資源組之間的資源相互隔離互不影響,以保證調(diào)度穩(wěn)定性。
設(shè)置調(diào)度資源組僅支持選擇應用場景為任務日常調(diào)度且與當前任務所屬項目有關(guān)聯(lián)關(guān)系的資源組。具體操作,請參見新建自定義資源組。
如果選擇了默認資源組,將根據(jù)默認資源組的配置修改自動更新。
單擊確定,完成計算任務資源配置。
后續(xù)步驟
完成計算任務資源配置后,下一步您可單擊提交,提交任務至發(fā)布中心或運維中心。
如果您的開發(fā)模式是Dev-Prod模式,任務提交成功后還需前往發(fā)布列表,將任務發(fā)布至生產(chǎn)環(huán)境。更多信息,請參見管理發(fā)布任務。
如果您的開發(fā)模式是Basic模式,則提交成功后的任務,即可參與生產(chǎn)環(huán)境的調(diào)度。您可以前往運維中心查看您發(fā)布的任務。更多信息,請參見查看并管理腳本任務、查看并管理手動任務。