引擎版本介紹
阿里云EMR Serverless Spark采用的是基于Apache Spark引擎。本文為您詳細介紹引擎版本號及其含義。
引擎版本號及其含義
引擎版本的格式為esr-** (Spark **, Scala **)
。Spark應用在標準的Java虛擬機(JVM)上運行,所有Spark任務都是通過Java或Scala代碼執(zhí)行。
您可以使用阿里云Fusion Engine提供的運行時環(huán)境,利用向量化和原生庫等技術(shù)來加速SQL類應用的執(zhí)行性能。Fusion引擎詳情請參見Fusion引擎。
內(nèi)容 | 含義 |
esr-** | EMR Serverless Spark版本號,例如esr-2.1。 |
Spark ** | 遵循的Apache Spark引擎版本號,例如Spark 3.3.1,表示基于Apache Spark 3.3.1構(gòu)建。 |
Scala ** | 表示該引擎版本所支持的Scala編程語言的版本,例如Scala 2.12。 |
以下為您介紹目前已有引擎版本及其對應的湖表格式版本。
引擎版本 | 湖表格式版本 |
esr-4.0.0 (Spark 3.5.2, Scala 2.12) |
|
esr-3.0.1 (Spark 3.4.3, Scala 2.12) esr-3.0.0 (Spark 3.4.3, Scala 2.12) |
|
esr-2.4.1 (Spark 3.3.1, Scala 2.12) esr-2.4.0 (Spark 3.3.1, Scala 2.12) |
|
esr-2.2.2 (Spark 3.3.1, Scala 2.12) |
|
esr-2.2 (Spark 3.3.1, Scala 2.12) | |
esr-2.1 (Spark 3.3.1, Scala 2.12) | |
esr-1.0 (Spark 2.4.7, Scala 2.11) | - |