智能生產制作支持通過對真人形象的學習訓練,實現基于文字或語音驅動數字人模擬真人播報功能。通過閱讀本文,您可以了解如何定制及使用數字人。
概述
數字人分為“定制訓練”和“合成使用”兩個環節。
定制訓練:指將真實人物形象經過算法訓練,生成為數字化模型,以服務后續使用該形象時不再需要真人錄制,即可通過算法合成形象視頻。如果您對數字人形象沒有特殊定制需求,也可以使用我們提供的多個免費數字人官方形象示例,直接進行數字人視頻合成使用。
合成使用:指基于已經定制訓練的數字化形象模型,通過文本或語音驅動其自動生成播報視頻。
下文會具體為您介紹,如何定制數字人形象以及如何使用已定制數字人形象進行合成使用。
定制數字人形象
智能生產制作提供仿真數字人形象定制服務,提供專業版和大眾版兩檔定制方案,您可以根據實際場景和需求選擇定制方案。
專業版:阿里云提供從錄制引導到訓練調教的全流程服務,針對單個形象進行訓練算法調優,可達到廣電傳媒級的擬真效果,實現個性化高標準定制。
大眾版:您需要自行上傳訓練素材,系統會采用標準化統一算法,2天內快速輸出定制形象,可快速低成本的實現數字分身定制。
數字人定制方案 | 訓練(錄制)方式 | 提交訓練素材方式 |
專業版 | 阿里云提供專業的錄制環境(杭州線下簽約影棚)和現場錄制導師,保證您在錄制環節中,采集到最佳效果的訓練素材。 | 通過釘釘加入群48335001108,聯系官方客服定制專業版數字人形象。 |
大眾版 (小樣本定制) | 自行選擇綠幕或實景環境錄制視頻,錄制要求請參見2D仿真數字人形象定制拍攝指南。 | 支持兩種提交方式: 1、通過智能媒體服務控制臺提交數字人定制。 2、通過API接口提交數字人訓練。 |
在錄制時,請嚴格遵守以下事項:
如果同一個形象需要有站姿、坐姿等不同表現,需要針對各個姿態進行獨立錄制和訓練,生成多個形象ID。
為保證最佳的訓練效果,請嚴格按照2D仿真數字人形象定制拍攝指南進行視頻錄制,尤其是保持面部表情自然生動、手部動作不遮擋面部,無情緒或指向性表達。
錄制后視頻的背景會在后續驅動合成時攜帶,如果后續引用數字人的視頻終片不需要錄制狀態的背景,請在上傳時進行摳圖處理。
使用數字人形象合成視頻
您可以通過控制臺、Web SDK、OpenAPI使用定制的數字人形象或官方數字人形象,創建數字人視頻合成任務。具體操作,請參見創建數字人視頻合成任務。
費用說明
計費詳情說明,請參見數字人和人聲克隆計費。