本文為您介紹如何配置自定義任務參數,防止系統分配資源時出現不合理的現象。
背景信息
自定義任務參數用于指定計算引擎的某些參數,避免由于企業的計算引擎特異性導致的引擎適配問題,同時提高了邏輯表任務的效率。
操作步驟
在Dataphin首頁,單擊頂部菜單欄的管理中心。
按照下圖操作指引,進入自定義任務參數頁簽,配置參數。
參數
描述
自定義參數生效
選擇自定義任務參數需要開啟還是關閉。
自定義參數配置
配置自定義任務參數,參數需要與Dataphin系統綁定的計算引擎源的特性一致,示例如下。
set odps.sql.mapper.cpu=100 set odps.sql.mapper.split.size=256 set odps.sql.reducer.cpu=100 set odps.sql.joiner.cpu=100
說明自定義參數配置采用優先級策略,任務節點的物理化配置較智能引擎的自定義任務參數優先級高。
參數配置完后,單擊確定。
在確認對話框中,單擊確定,完成自定義任務參數的配置。
您也可以恢復計算引擎的默認值,在自定義任務參數頁面,單擊恢復默認值。在確認對話框中,單擊確定,完成計算引擎的默認值的恢復。
文檔內容是否對您有幫助?