EMR Workflow是一個全托管的工作流和任務(wù)調(diào)度服務(wù)，100%兼容開源Apache DolphinScheduler。它提供了易于使用的調(diào)度服務(wù)，您可以通過可視化的操作界面輕松地管理工作流和任務(wù)，高效構(gòu)建數(shù)據(jù)湖倉，并為生產(chǎn)任務(wù)的穩(wěn)定運(yùn)行提供保障。

產(chǎn)品優(yōu)勢

• 即開即用，免部署、免運(yùn)維。

• 基于阿里云基礎(chǔ)設(shè)施提供穩(wěn)定可靠的云原生Serverless服務(wù)。

• 與阿里云RAM賬號體系兼容，提供企業(yè)級的安全和隔離能力。

• 無縫對接EMR資源集群和各種大數(shù)據(jù)計(jì)算存儲引擎，例如Hive、Spark和Flink等。

• 提供與Apache DolphinScheduler兼容的接口和使用體驗(yàn)，支持開源DolphinScheduler和EMR舊版數(shù)據(jù)開發(fā)作業(yè)的一鍵遷移。

產(chǎn)品功能

EMR Workflow具有如下功能：

• 支持多種任務(wù)類型。例如SHELL、SPARK、HIVECLI等多種類型的任務(wù)調(diào)度。

• 可視化的任務(wù)流程編輯。支持通過可視化的方式創(chuàng)建任務(wù)流程，詳情請參見創(chuàng)建工作流。

• 實(shí)時監(jiān)控。提供實(shí)時的任務(wù)監(jiān)控和日志查看，詳情請參見管理任務(wù)。

• 定時任務(wù)管理。支持定時任務(wù)的創(chuàng)建和管理，詳情請參見定時工作流。

• 異常告警。支持異常告警和通知，保障任務(wù)調(diào)度的及時響應(yīng)，詳情請參見安全中心。

• 管理文件。支持可視化創(chuàng)建文件、上傳文件等操作，詳情請參見資源中心。

相關(guān)文檔

• 基本概念

• 管理調(diào)度資源組

• 工作流快速入門

• 管理工作流定義

• 任務(wù)類型

• 參數(shù)說明