背景信息
通過本文所介紹的方法，您可以輕松地將數字人功能集成到剪輯時間線Timeline當中，以此便捷地生成帶數字人的視頻成片。
您可以根據自己的具體場景與使用習慣，選擇以下3種方法中的任意一種，來在剪輯時間線Timeline上配置數字人相關的內容：
文字內容 Content；
音頻媒資標識 MediaId；
音頻文件地址 MediaURL。
方式一：通過文字內容 Content生成數字人成片
僅需輸入一段文字內容，就可以輕松生成一個以這篇文字作為內容的數字人口播視頻，其具體用法與 AI_TTS 文字轉語音類似。更進一步地，您可以通過指定不同的聲音類型、語調和語速，來生成不同語音風格的數字人視頻成片。
說明 設置了2條視頻軌，其中第1條中設置了一個全局圖片作為背景圖，第2條視頻軌中包含了一段由文字內容驅動生成的數字人視頻；
在第2條視頻軌的數字人Clip中，指定“云晨”作為數字人形象，“知甜”作為智能生成的聲音類型，其文本內容在Content字段中配置。
同時，在數字人Clip中設置AI_ASR效果，自動生成對應字幕。
成片效果 | Timeline示例 |
| {
"VideoTracks": [{
"VideoTrackClips": [{
"Type": "GlobalImage",
"MediaId": "7980d8f************e6f7e5696301"
}]
}, {
"VideoTrackClips": [{
"Comment": "數字人-輸入為文字",
"Type": "AI_Avatar",
"AvatarId": "fanyu-broadcast_standing",
"Content": "近日，隨著消費升級和物流技術的發展，倉儲式購物逐漸受到消費者的歡迎。據了解，這種購物方式是指將商品儲存在倉庫中，顧客通過線上平臺選擇商品后，到物流中心自行提取商品。避免了傳統購物的排隊、擁堵等問題，同時也提高了商品的物流效率和安全性。目前，不少電商企業已經開始嘗試倉儲式購物，成為未來新零售的重要趨勢之一。",
"Voice": "zhitian",
"Effects": [{
"Type": "AI_ASR",
"Font": "Alibaba PuHuiTi",
"FontSize": 60,
"Spacing": 1,
"Ratio": 1
}]
}]
}]
}
|
方式二：通過音頻媒資標識 MediaId生成數字人成片
您可以通過在時間線Timeline中傳入一段原文件作為包含口播內容的音頻文件的MediaId（該MediaId通過IMS媒資上傳或注冊接口取得），來驅動生成對應的數字人視頻成片。
說明 設置了2條視頻軌，其中第1條中設置了一個全局圖片作為背景圖，第2條視頻軌中包含了一段由音頻媒資標識 MediaId驅動生成的數字人視頻；
在第2條視頻軌的數字人Clip中，指定“云新”作為數字人形象；
同時，在數字人Clip中設置AI_ASR效果，自動生成對應字幕。
成片效果 | 時間線示例 |
| {
"VideoTracks": [{
"VideoTrackClips": [{
"Type": "GlobalImage",
"MediaId": "eb2dd180********92ee7e7d75b6301"
}]
}, {
"VideoTrackClips": [{
"Comment": "數字人-輸入為音頻 MediaId",
"Type": "AI_Avatar",
"AvatarId": "fanyu-broadcast_standing",
"MediaId": "596cbd10e********b6e6f7e5696302",
"Effects": [{
"Type": "AI_ASR",
"Font": "Alibaba PuHuiTi",
"FontSize": 60,
"Spacing": 1,
"Ratio": 1
}]
}]
}]
}
|
方式三：通過音頻文件地址 MediaURL生成數字人成片
與通過音頻媒資標識 MediaId驅動類似，您也可以直接在Timeline中傳入位于您的OSS bucket地址中音頻文件的URL地址。依據這段OSS URL地址，就可以生成一段對應的數字人視頻成片，省去了媒資注冊的步驟。
說明 設置了2條視頻軌，其中第1條中設置了一個全局圖片作為背景圖，第2條視頻軌中包含了一段由音頻 OSS地址MediaURL驅動生成的數字人視頻；
在第2條視頻軌的數字人Clip中，指定“云新”作為數字人形象；
同時，在數字人Clip中設置AI_ASR效果，自動生成對應字幕。
成片效果 | 時間線示例 |
| {
"VideoTracks": [{
"VideoTrackClips": [{
"Type": "GlobalImage",
"MediaId": "7980d8f************e6f7e5696301"
}]
}, {
"VideoTrackClips": [{
"Comment": "數字人-輸入為音頻 MediaURL",
"Type": "AI_Avatar",
"AvatarId": "fanyu-broadcast_standing",
"MediaURL": "https://your_bucket.oss-cn-shanghai.aliyuncs.com/your_audio.mp3",
"Effects": [{
"Type": "AI_ASR",
"Font": "Alibaba PuHuiTi",
"FontSize": 60,
"Spacing": 1,
"Ratio": 1
}]
}]
}]
}
|