提交Spark應(yīng)用。
接口說明
- 地域的公網(wǎng)接入地址：
adb.<region-id>.aliyuncs.com。示例：adb.cn-hangzhou.aliyuncs.com。 - 地域的 VPC 接入地址：
adb-vpc.<region-id>.aliyuncs.com。示例：adb-vpc.cn-hangzhou.aliyuncs.com。
說明
如果華北 1（青島）、華南 1（深圳）、華南 3（廣州）、中國香港發(fā)起請(qǐng)求時(shí)，遇到 409 錯(cuò)誤，請(qǐng)聯(lián)系技術(shù)支持。
調(diào)試
您可以在OpenAPI Explorer中直接運(yùn)行該接口，免去您計(jì)算簽名的困擾。運(yùn)行成功后，OpenAPI Explorer可以自動(dòng)生成SDK代碼示例。
授權(quán)信息
下表是API對(duì)應(yīng)的授權(quán)信息，可以在RAM權(quán)限策略語句的Action元素中使用，用來給RAM用戶或RAM角色授予調(diào)用此API的權(quán)限。具體說明如下：
- 操作：是指具體的權(quán)限點(diǎn)。
- 訪問級(jí)別：是指每個(gè)操作的訪問級(jí)別，取值為寫入（Write）、讀取（Read）或列出（List）。
- 資源類型：是指操作中支持授權(quán)的資源類型。具體說明如下：
- 對(duì)于必選的資源類型，用背景高亮的方式表示。
- 對(duì)于不支持資源級(jí)授權(quán)的操作，用
全部資源表示。
- 條件關(guān)鍵字：是指云產(chǎn)品自身定義的條件關(guān)鍵字。
- 關(guān)聯(lián)操作：是指成功執(zhí)行操作所需要的其他權(quán)限。操作者必須同時(shí)具備關(guān)聯(lián)操作的權(quán)限，操作才能成功。
| 操作 | 訪問級(jí)別 | 資源類型 | 條件關(guān)鍵字 | 關(guān)聯(lián)操作 |
|---|---|---|---|---|
| adb:SubmitSparkApp | create | *SparkApplication acs:adb:{#regionId}:{#accountId}:dbcluster/{#DBClusterId}/resourcegroup/{#ResourceGroup} |
| 無 |
請(qǐng)求參數(shù)
| 名稱 | 類型 | 必填 | 描述 | 示例值 |
|---|---|---|---|---|
| AppName | string | 否 | 應(yīng)用名稱，可自定義字符串，長度不能超過 64 個(gè)字符。 | TestApp |
| AppType | string | 否 | 應(yīng)用類型，取值說明：
| SQL |
| Data | string | 是 | 應(yīng)用模板數(shù)據(jù)。 說明
應(yīng)用模板配置，請(qǐng)參見《Spark 應(yīng)用配置指南》。
| conf spark.driver.resourceSpec=small; conf spark.executor.instances=1; conf spark.executor.resourceSpec=small; conf spark.app.name=TestApp; |
| AgentSource | string | 否 | 客戶端類型。可自定義字符串，長度不能超過 64 個(gè)字符。 | CONSOLE |
| AgentVersion | string | 否 | 應(yīng)用程序使用的版本。可自定義字符串，長度不能超過 64 個(gè)字符。 | 1.091 |
| DBClusterId | string | 是 | 企業(yè)版、基礎(chǔ)版或湖倉版集群 ID。 說明
您可以調(diào)用 DescribeDBClusters 接口可以查詢集群 ID。
| amv-bp11q28kvl688**** |
| ResourceGroupName | string | 是 | Job 型資源組名稱。 說明
您可以調(diào)用 DescribeDBResourceGroup 接口查看集群的資源組 ID。
| adb |
| TemplateFileId | long | 否 | 應(yīng)用模板 ID。 說明
您可以調(diào)用 GetSparkTemplateFullTree 接口可以查詢應(yīng)用模板 ID。
| 15 |
返回參數(shù)
示例
正常返回示例
JSON格式
{
"RequestId": "1AD222E9-E606-4A42-BF6D-8A4442913CEF",
"Data": {
"AppId": "s202204132018hzprec1ac61a000****",
"AppName": "TestApp",
"Message": "Insufficient resources.",
"State": "SUBMITTED"
}
}錯(cuò)誤碼
| HTTP status code | 錯(cuò)誤碼 | 錯(cuò)誤信息 | 描述 |
|---|---|---|---|
| 400 | Spark.App.ExceedQuotaLimitation | The requested resource exceeds the maximum limit: %s | - |
| 400 | Spark.App.InvalidAppTypeWhenSubmit | The specified AppType is INVALID or NULL. Please refer to the documentation to correct the parameters for %s. | AppType類型不合法，請(qǐng)參考使用文檔指定適合業(yè)務(wù)的AppType，請(qǐng)關(guān)注配置類型：%s。 |
| 400 | Spark.App.InvalidResourceSpec | The requested resource type is not supported:\n %s | - |
| 400 | Spark.App.ParameterConflict | Conflicting parameters submitted:\n %s | - |
| 400 | Spark.App.ResourceNegativeError | The requested resource MUST be positive: %s | - |
| 400 | Spark.Config.InvalidAppFilePath | The main driver file MUST be a valid OSS path. Current is %s. | 主驅(qū)動(dòng)文件地址必須是合法的OSS地址，當(dāng)前的地址是 %s。 |
| 400 | Spark.Config.invalidConnectors | The spark.adb.connectors configuration is invalid: %s | spark.adb.connectors配置不正確。 |
| 400 | Spark.Config.InvalidDiskConfig | The requested disk mount parameter is invalid: %s | 磁盤掛載配置錯(cuò)誤。 |
| 400 | Spark.Config.InvalidHostAliasConfig | The requested host alias parameter %s is invalid. Example: 127.0.0.1 localhost local | 域名映射配置錯(cuò)誤。 |
| 400 | Spark.Config.InvalidLogOssPath | The OSS address for log storage is illegal: %s | 存儲(chǔ)日志的OSS地址非法。 |
| 400 | Spark.Config.InvalidRoleArnFormat | Configure RoleARN %s invalid format. It should match acs:ram::uid_number:role/role_name | 配置的RoleARN格式錯(cuò)誤。 |
| 400 | Spark.Config.InvalidTimeZone | Unable to parse time zone configuration %s : %s | 時(shí)區(qū)配置錯(cuò)誤。 |
| 400 | Spark.Config.MainAppFileNotExists | The main driver file is missing, [file] or [sqls] must be configured. | 主驅(qū)動(dòng)文件缺失，必須保證file或者sqls配置不為空。 |
| 400 | Spark.Config.OSSPathAccessError | The configured OSS address %s cannot be accessed. | 配置的OSS路徑無法訪問。 |
| 400 | Spark.Config.OSSPathNotExists | The OSS address %s requested does not exist or the permissions are insufficient. | OSS路徑不存在或當(dāng)前用戶無權(quán)限訪問。 |
| 400 | Spark.Config.RoleArnVerifyFailed | RoleARN parameter verification failed. Error msg: %s when verify RoleArn %s | RoleARN參數(shù)校驗(yàn)失敗。 |
| 400 | Spark.Config.SecurityGroupNotFound | The security group in the configuration does not exist or cannot be accessed. %s. | 配置的資源組不存在或者因權(quán)限不足無法訪問。%s。 |
| 400 | Spark.Config.VswitchNotFound | The vswitch in the configuration does not exist or cannot be accessed. %s. | 無法找到配置虛擬機(jī)交換機(jī)，或當(dāng)前賬號(hào)權(quán)限不足。%s。 |
| 400 | Spark.InvalidParameter | Invalid parameter value: %s | 輸入?yún)?shù)不正確: %s。 |
| 400 | Spark.InvalidState | The object of the operation is in an invalid state: %s | 操作對(duì)象處于非合法狀態(tài)。 |
| 400 | Spark.RoleArn.Invalid | %s is not found, or the RAM role has not been authorized. | RoleArn不存在或子賬號(hào)未授權(quán)。 |
| 400 | Spark.SQL.BlankError | Input sql can not be blank string. | 提交SQL不能為空。 |
| 400 | Spark.SQL.MultipleSQLError | Element in field [sqls] can not contain more than one sql statement: %s. | 提交的Spark SQL包含了多條可執(zhí)行SQL。 |
| 400 | Spark.SQL.NotFoundExecutableSQLError | No executable statements are submitted. Please check the input SQL. | Spark作業(yè)的SQL信息中不包含可執(zhí)行語句。 |
| 400 | Spark.SQL.NotFoundExecutableSQLError | The execution part is not included in the current submitted SQL, please check the input SQL. | 提交的SQL中不包含可執(zhí)行內(nèi)容。 |
| 400 | Spark.SQL.ParserError | Submit spark app failed when parser SQL %s. Error message: %s. | 解析提交的Spark SQL失敗。 |
| 403 | Spark.Forbidden | No permissions to access the resources: %s | 權(quán)限不足，拒絕訪問相關(guān)資源。您當(dāng)前申請(qǐng)?jiān)L問的信息是：%s。 |
| 404 | Spark.App.ContentNotFound | The requested content %s of the Spark application is not found. | 找不到指定Spark作業(yè)的提交內(nèi)容。 |
| 404 | Spark.App.NotFound | The Spark application %s is not found. | 未能找到輸入的 Spark App。 |
| 404 | Spark.ObjectNotFound | The object is not found. More information: %s | 操作對(duì)象不存在。關(guān)聯(lián)信息：%s。 |
| 500 | Spark.ServerError | The Spark control component system encountered an error, please create a ticket to solve the problem or concat the supported engineer on duty. Error message: %s | Spark管控組件系統(tǒng)遇到錯(cuò)誤，請(qǐng)?zhí)峤还危蚵?lián)系值班工程師。 |
訪問錯(cuò)誤中心查看更多錯(cuò)誤碼。
變更歷史
| 變更時(shí)間 | 變更內(nèi)容概要 | 操作 |
|---|---|---|
| 2024-06-11 | OpenAPI 錯(cuò)誤碼發(fā)生變更 | 查看變更詳情 |
| 2023-07-27 | OpenAPI 錯(cuò)誤碼發(fā)生變更 | 查看變更詳情 |
| 2023-06-28 | API 內(nèi)部配置變更，不影響調(diào)用 | 查看變更詳情 |