本文介紹視頻生產(videoenhan)類目下的通用視頻生成GenerateVideo的語法及示例。

功能描述

通用視頻生成能力可以根據輸入的原始視頻,智能生成營銷短視頻。支持圖像、視頻、音頻等素材混合處理,支持轉場特效等加工效果疊加。輸入視頻的場景類型可選擇服飾場景(默認)或通用場景,通過分析視頻中的人和物,生成故事線來組織素材的順序。您也可以通過輸入參數的設置強制按輸入素材順序合成視頻場景。

通用視頻生成能力主要包含以下功能點:

  • 輸入文件類型:支持video(視頻)、audio(音頻)、image(圖像)中的一種或多種。
  • 輸出視頻節奏:可選normal(普通)、fast(快)、slow(慢),默認為normal(普通)。
  • 鏡頭轉場風格的選擇:共計15種風格,如果沒有設置則按照Style隨機,目前支持的鏡頭轉場風格包括:basic(無)、slow(舒緩)、fast(動感)、normal(自然)、ink(水墨)、glitch(機械故障)、shift(切換)、mosaic(馬賽克)、shutter(百葉窗)、zoom(縮放)、mask(遮罩)、brush(筆刷)、wind(風舞)、smog(煙霧)。
  • 智能特效:當前支持音畫聯動和靜轉動特效,默認添加。
  • 動態拼圖特效:支持在單鏡頭中通過拼圖展示多個視頻圖像素材,默認不添加。
說明
  • 您可以進入在線咨詢獲取在線人工幫助。
  • 當前能力可在視覺智能開放平臺有完整的免費產品體驗,您可以單擊立即試用對該能力進行更直觀試用以及在線購買。
  • 阿里云視覺智能開放平臺視覺AI能力API接入、接口使用或問題咨詢等,請通過釘釘群(23109592)加入阿里云視覺智能開放平臺咨詢群聯系我們。

應用場景

  • 信息流廣告制作:基于提供的素材批量生成廣告視頻,進行低成本投放。
  • 短視頻二次加工:基于提供的視頻內容和圖片素材,進行新的視頻素材制作。

特色優勢

  • 全自動生產:根據業務需要配置參數,自動化生產視頻。
  • 功能豐富:支持多種素材輸入,支持轉場特效等,實現更豐富的業務場景應用。

接入指引

1. 注冊阿里云賬號:打開阿里云官網,在阿里云官網右上角,單擊立即注冊,按照操作提示完成賬號注冊。

2. 開通能力:請確保您已開通視頻生產服務,若未開通服務請立即開通

3. 創建AccessKey:請確保您已創建AccessKey,如果您使用的是子賬號AccessKey,您需要給子賬號賦予AliyunVIAPIFullAccess權限,具體操作,請參見RAM授權

4. 在線調試(可選):您可以通過OpenAPI Explorer在線調試能力,查看完整的調用示例代碼及SDK依賴信息,也可以下載完整的工程。

5. 開發接入步驟:

  • SDK總覽中選擇您要接入使用的SDK語言。
  • 在對應語言的SDK文檔中找到AI類目為視頻生產(videoenhan)類目的SDK包進行安裝。
  • 參考文檔中提供的示例代碼進行適當修改后調用。

6. 示例代碼:該能力常用語言的示例代碼,請參見通用視頻生成示例代碼,常用語言查詢異步任務結果的示例代碼,請參見查詢異步任務結果示例代碼

7. 客戶端直接調用:該能力常用的客戶端調用方式包括以下幾種。

輸入限制

  • 圖片格式:JPG、PNG。
  • 圖片大小:每張圖片大于30 KB,小于100 MB。
  • 視頻格式:MP4、AVI、MKV、MOV、JPG、PNG、BMP、MP3、WAV。
  • 視頻大小:不超過1 GB。
  • 視頻素材最多5個,且總時長不超過3分鐘,超過部分會被自動截斷丟棄(按輸入視頻順序保留前3分鐘)。圖像素材最多40個。音頻素材最多1個。
  • URL地址中不能包含中文字符。

計費說明

關于通用視頻生成的計費方式及報價,請參見計費介紹

說明 下方調試接口為付費接口。

調用步驟

該能力為異步能力,需分兩步進行調用。

第一步調用GenerateVideo接口提交任務,請求成功后,得到一個任務ID。

第二步調用GetAsyncJobResult接口查詢結果,根據任務ID查詢任務執行狀態和結果。如果任務還在處理中,可稍等一段時間后再進行查詢。

調試

您可以在OpenAPI Explorer中直接運行該接口,免去您計算簽名的困擾。運行成功后,OpenAPI Explorer可以自動生成SDK代碼示例。

請求參數

名稱 類型 是否必選 示例值 描述
Action String GenerateVideo

系統規定參數。本接口取值:GenerateVideo

Scene String costume

生成視頻場景類型。取值如下:

  • costume:服飾場景(默認)
  • general:通用場景
  • keeporder:強制按輸入素材順序合成視頻場景
Width Integer 640

輸出視頻的width,取值范圍32~2160。

Height Integer 640

輸出視頻的height,取值范圍32~2160。若width和height均沒有設置,則按照750×750輸出。如果設置了其中一個,則按照1:1輸出。

Style String fast

輸出視頻節奏。可選normal、fast、slow。默認為normal。

Duration Float 10

輸出視頻時長,單位為秒。默認為20秒。

視頻輸出最短為5秒,最長為60秒。

DurationAdaption Boolean true

輸出視頻時長自適應。取值true或false,為true時Duration設置不生效。

TransitionStyle String brush

鏡頭轉場風格。共計15種風格。如果沒有設置則按照Style隨機。

目前支持的鏡頭轉場風格包括:basic(無)、slow(舒緩)、fast(動感)、normal(自然)、ink(水墨)、glitch(機械故障)、shift(切換)、mosaic(馬賽克)、shutter(百葉窗)、zoom(縮放)、mask(遮罩)、brush(筆刷)、wind(風舞)、smog(煙霧)。

SmartEffect Boolean true

是否添加智能特效,默認為true。當前支持音畫聯動和靜轉動特效。

PuzzleEffect Boolean true

是否動態拼圖特效,支持在單鏡頭中通過拼圖展示多個視頻圖像素材。默認為false。

Mute Boolean true

生成視頻是否靜音。默認為false。

說明 如果沒有音樂素材或視頻素材無聲時生成的視頻沒有音樂。
FileList.N.Type String video

輸入文件類型。包括video、audio、image。

可以同時輸入多種素材(video+image+audio或video+image或video+audio或image+audio)。

FileList.N.FileUrl String http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-3.0domepic/videoenhan/GenerateVideo/1-video1.mp4

輸入文件URL地址。推薦使用上海地域的OSS鏈接,對于文件在本地或者非上海地域OSS鏈接的情況,請參見文件URL處理

輸入限制:

  • 圖片格式:JPG、PNG。
  • 圖片大小:每張圖片大于30 KB,小于100 MB。
  • 視頻格式:MP4、AVI、MKV、MOV、JPG、PNG、BMP、MP3、WAV。
  • 視頻大小:不超過1 GB。
  • 視頻素材最多5個,且總時長不超過3分鐘,超過部分會被自動截斷丟棄(按輸入視頻順序保留前3分鐘)。圖像素材最多40個。音頻素材最多1個。
  • URL地址中不能包含中文字符。
FileList.N.FileName String 1-video1.mp4

輸入文件名稱。視頻音頻文件格式為MP4或MP3時,可以忽略文件后綴。其他格式必須包含后綴。

返回數據

名稱 類型 示例值 描述
RequestId String 7CB9B663-3EF8-4C9C-A464-FDA2B5F1E3A4

請求ID。

Data Object

返回的結果數據內容。

該數據需要在異步任務執行成功后,通過調用GetAsyncJobResult接口,對其Result字段進行JSON反序列化之后得到。

VideoCoverUrl String http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.mp4?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=F9flL1n5GPYaae0dLl%2F8D%2Bn4j6****

輸出視頻封面URL地址。

說明 該URL地址為臨時地址,有效期為30分鐘,過期后將無法訪問。若需要長時間或者永久保存文件,請在30分鐘內訪問URL地址,下載文件轉存到自己的OSS或者其他存儲空間。
VideoUrl String http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.jpg?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=djBvGvdJu8bd%2FC%2BVHdg1d57U%2Bu****

輸出視頻URL地址。

說明 該URL地址為臨時地址,有效期為30分鐘,過期后將無法訪問。若需要長時間或者永久保存文件,請在30分鐘內訪問URL地址,下載文件轉存到自己的OSS或者其他存儲空間。
Message String 該調用為異步調用,任務已提交成功,請以requestId的值作為jobId參數調用同類目下GetAsyncJobResult接口查詢任務執行狀態和結果。

提交異步任務后的提示信息。

查詢結果

您需要通過返回的RequestId調用GetAsyncJobResult接口來獲取該接口的真實請求結果。具體操作,請參見GetAsyncJobResult。其中Result字段為返回結果的JSON序列化字符串,JSON中字段說明請參見返回數據中的Data參數。

SDK參考

阿里云視覺AI視頻生產類目下的通用視頻生成能力推薦使用SDK調用,支持多種編程語言,調用時請選擇AI類目為視頻生產(videoenhan)的SDK包,文件參數通過SDK調用可支持本地文件及任意URL,具體可參見SDK總覽

示例代碼

該能力常用語言的示例代碼,請參見通用視頻生成示例代碼,常用語言查詢異步任務結果的示例代碼,請參見查詢異步任務結果示例代碼

示例

請求示例

http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=GenerateVideo      //更多關于訪問域名(Endpoint)信息,請參見:http://bestwisewords.com/document_detail/143103.html
&Scene=costume
&Width=640
&Height=640
&Style=fast
&Duration=10.0
&DurationAdaption=true
&TransitionStyle=brush
&SmartEffect=true
&PuzzleEffect=true
&Mute=true
&FileList=[{"Type":"video","FileUrl":"http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-3.0domepic/videoenhan/GenerateVideo/1-video1.mp4","FileName":"1-video1.mp4"}]
&公共請求參數

正常返回示例

XML格式

HTTP/1.1 200 OK
Content-Type:application/xml

<GenerateVideoResponse>
    <RequestId>7CB9B663-3EF8-4C9C-A464-FDA2B5F1E3A4</RequestId>
    <Message>該調用為異步調用,任務已提交成功,請以requestId的值作為jobId參數調用同類目下GetAsyncJobResult接口查詢任務執行狀態和結果。</Message>
</GenerateVideoResponse>

JSON格式

HTTP/1.1 200 OK
Content-Type:application/json

{
  "RequestId" : "7CB9B663-3EF8-4C9C-A464-FDA2B5F1E3A4",
  "Message" : "該調用為異步調用,任務已提交成功,請以requestId的值作為jobId參數調用同類目下GetAsyncJobResult接口查詢任務執行狀態和結果。"
}

返回示例補充說明

 //查詢結果:請求示例
http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=GetAsyncJobResult
&JobId=E75FE679-0303-4DD1-8252-1143B4FA8A27
&<公共請求參數>

//查詢結果:返回示例
{
  "RequestId" : "43A0AEB6-45F4-4138-8E89-E1A5D63200E3",
  "Data" : {
    "Status" : "PROCESS_SUCCESS",
    "JobId" : "186AC396-0EEC-46F1-AAA1-BF3585227427",
    "Result" : "{\"VideoCoverUrl\":\"http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.mp4?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=F9flL1n5GPYaae0dLl%2F8D%2Bn4j6****\",\"VideoUrl\":\"http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.jpg?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=djBvGvdJu8bd%2FC%2BVHdg1d57U%2Bu****\"}"
  }
}

//Result反序列化
{
  "VideoCoverUrl" : "http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.mp4?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=F9flL1n5GPYaae0dLl%2F8D%2Bn4j6****",
  "VideoUrl" : "http://vibktprfx-prod-prod-aic-vd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-gen/2021-05-07-15/B9MGfwxu.jpg?Expires=1620372653&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=djBvGvdJu8bd%2FC%2BVHdg1d57U%2Bu****"
}

錯誤碼

具體請參見常見錯誤碼

安全聲明

  • 請確保上傳的圖片或文件來源符合相應的法律法規。
  • 通過體驗調試上傳的臨時文件有效期為1小時,在24小時后會被系統自動清理刪除。