功能描述

在獲得用戶授權(quán)的前提下，視頻人臉融合可以精準(zhǔn)地定位視頻中的人臉，將用戶上傳的目標(biāo)人臉照片與另一個人的人臉形象進(jìn)行面部融合，達(dá)到換臉的感官效果。

模板視頻人臉融合是基于用戶預(yù)先上傳創(chuàng)建的模版，通過輸入一張待融合人臉圖像，將圖像人臉融合進(jìn)指定的模板視頻中。使用該方式需要提前創(chuàng)建好模板視頻（AddFaceVideoTemplate），其處理效率高于通用視頻人臉融合方式。

適用場景：

• 有固定數(shù)量的模板視頻進(jìn)行融合的場景。
• 同時支持視頻中有一張臉和多張臉的場景，支持選臉和多臉融合。

為保證生成內(nèi)容的安全合法，請勿使用公眾人物或涉及敏感信息的圖像或視頻進(jìn)行融合，同時，本服務(wù)也會在合成結(jié)果的左下角處添加Generated by AI的水印內(nèi)容，效果如下圖所示。

應(yīng)用場景

• 影視后期制作：在影視后期制作時，因為某些原因需要替換演員，通過視頻人臉融合技術(shù)，可利用前期拍攝素材進(jìn)行處理，讓前期視頻素材中的人物看起來是新的演員在表演，可以為制片方節(jié)省大量的重新拍攝成本。
• 娛樂性短視頻制作：用戶可以將已獲授權(quán)的合法視頻中的人物，換成自己的人臉，生成趣味性視頻。
• 虛擬試衣制作：在婚紗攝影、民族服飾、漢服、仿妝等試衣場景，通過視頻人臉融合技術(shù)進(jìn)行服飾虛擬試穿。
• 電商數(shù)字人直播：在電商賣貨帶貨直播場景，通過網(wǎng)紅臉I(yè)D換臉實現(xiàn)數(shù)字人直播帶貨、虛擬人換臉。

特色優(yōu)勢

• 高保真、低違和效果：融合后的人臉保留了替換者人臉身份信息的視覺特征，而融入被替換者人臉中又無違和感，融合效果自然。
• 表情膚色一致性：融合后的人臉最大限度保留被替換者的面目表情、膚色一致性。
• 支持復(fù)雜人臉角度：支持模板人臉偏側(cè)一定角度，融合后的結(jié)果真實穩(wěn)定。
• 支持多人臉指定換臉：支持視頻中含有多張人臉，并指定每個臉與不同的用戶臉進(jìn)行融合，可應(yīng)用在全家福、婚紗攝影、多人角色創(chuàng)作等多人互動場景。

接入指引

1. 注冊阿里云賬號：打開阿里云官網(wǎng)，在阿里云官網(wǎng)右上角，單擊立即注冊，按照操作提示完成賬號注冊。

2. 開通能力：請確保您已開通視頻生產(chǎn)服務(wù)，若未開通服務(wù)請立即開通。本能力僅限企業(yè)認(rèn)證用戶開通。實名認(rèn)證操作方法請參見實名認(rèn)證。

3. 創(chuàng)建AccessKey：請確保您已創(chuàng)建AccessKey，如果您使用的是子賬號AccessKey，您需要給子賬號賦予AliyunVIAPIFullAccess權(quán)限，具體操作，請參見RAM授權(quán)。

4. 在線調(diào)試（可選）：您可以通過OpenAPI Explorer在線調(diào)試能力，查看完整的調(diào)用示例代碼及SDK依賴信息，也可以下載完整的工程。

5. 前提條件：先通過視頻人臉融合模板增加接口（AddFaceVideoTemplate）添加視頻模板獲取模板ID（TemplateId），再使用已上傳視頻對應(yīng)的模板ID和待融合人臉圖像進(jìn)行請求。

6. 開發(fā)接入步驟：

• 在SDK總覽中選擇您要接入使用的SDK語言。
• 在對應(yīng)語言的SDK文檔中找到AI類目為視頻生產(chǎn)（videoenhan）類目的SDK包進(jìn)行安裝。
• 參考文檔中提供的示例代碼進(jìn)行適當(dāng)修改后調(diào)用。

7. 示例代碼：該能力常用語言的示例代碼，請參見模板視頻人臉融合示例代碼。

8. 客戶端直接調(diào)用：該能力常用的客戶端調(diào)用方式包括以下幾種。

• Web前端直接調(diào)用
• 小程序場景下直接調(diào)用
• Android端直接調(diào)用
• iOS端直接調(diào)用

輸入限制

• 圖像格式：JPEG、JPG、PNG。
• 圖像分辨率：大于等于128×128像素，小于等于4000×4000像素。
• 圖像大小：不大于20 MB。
• URL地址不能包含中文字符。

入?yún)⒄f明

MergeInfos指融合參數(shù)，模板視頻的人臉信息及待融合的用戶人臉圖片（TemplateId為多人臉時不可為空）。

• MergeInfos僅為多人視頻場景時使用，需確保用戶添加模板時VideoScene參數(shù)傳入了multi值，其中傳入的TemplateFaceID需要與添加模版時返回的FaceInfos里的TemplateFaceID一一對應(yīng)。
• 同時傳入FaceImageURL和MergeInfos，以TemplateId為單/多人臉為準(zhǔn)，過濾另一個入?yún)ⅰ?/li>

圖像質(zhì)量建議

• 要求保證圖像中的人臉清晰。圖像中人臉尺寸建議大于64×64像素，人臉區(qū)域建議不大于全圖區(qū)域的2/3。
• 建議圖像中人臉五官區(qū)域輪廓完整，無明顯遮擋。人臉融合算法支持人臉偏側(cè)一定角度，在偏側(cè)角度不超過30度的情況下能取得更佳效果。
• 對于多人臉視頻場景，系統(tǒng)會自動識別出整個視頻中的不同人物ID，建議視頻中的人物不要出現(xiàn)角度過大的轉(zhuǎn)動以及明顯遮擋的情況，否則識別出的人物ID個數(shù)可能不準(zhǔn)確。

推薦圖像示例：

不推薦圖像示例：

調(diào)用步驟

該能力為異步能力，需分兩步進(jìn)行調(diào)用。

第一步調(diào)用MergeVideoModelFace接口提交任務(wù)，請求成功后，得到一個任務(wù)ID。

第二步調(diào)用GetAsyncJobResult接口查詢結(jié)果，根據(jù)任務(wù)ID查詢?nèi)蝿?wù)執(zhí)行狀態(tài)和結(jié)果。如果任務(wù)還在處理中，可稍等一段時間后再進(jìn)行查詢。

計費說明

關(guān)于模板視頻人臉融合的計費方式及報價，請參見計費介紹。

請求參數(shù)

返回數(shù)據(jù)

查詢結(jié)果

該接口為異步接口，當(dāng)前并未返回真實的請求結(jié)果，您需要通過返回的RequestId調(diào)用GetAsyncJobResult接口來獲取該接口的真實請求結(jié)果。詳情請參見GetAsyncJobResult。

SDK參考

阿里云視覺AI視頻生產(chǎn)類目下的模板視頻人臉融合能力推薦使用SDK調(diào)用，支持多種編程語言，調(diào)用時請選擇AI類目為視頻生產(chǎn)（videoenhan）的SDK包，文件參數(shù)通過SDK調(diào)用可支持本地文件及任意URL，具體可參見SDK總覽。

示例代碼

該能力常用語言的示例代碼，請參見模板視頻人臉融合示例代碼。

示例

請求示例

http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=MergeVideoModelFace      //更多關(guān)于訪問域名（Endpoint）信息，請參見：http://bestwisewords.com/document_detail/143103.html
&TemplateId=3bf2418c-7adf-4002-a9d6-2f7cf1889c0d
&FaceImageURL=http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-3.0domepic/videoenhan/MergeVideoFace/MergeVideoFace-xxxx.png
&AddWatermark=true
&Enhance=true
&WatermarkType=EN
&MergeInfos=[{"TemplateFaceID":"f913c614-d542-42ba-b173-07db2058c207_0","TemplateFaceURL":"http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-/videoenhan/MergeVideoModelFace/xxx.jpg","ImageURL":"http://viapi-test.oss-cn-shanghai.aliyuncs.com/test-team/MergeVideoModelFace/xxx.jpg"}]
&公共請求參數(shù)

正常返回示例

XML格式

HTTP/1.1 200 OK
Content-Type:application/xml

<MergeVideoModelFaceResponse>
    <RequestId>334F180F-3B50-51CB-B4CB-9A86A542D3BC</RequestId>
    <Message>該調(diào)用為異步調(diào)用，任務(wù)已提交成功，請以requestId的值作為jobId參數(shù)調(diào)用同類目下GetAsyncJobResult接口查詢?nèi)蝿?wù)執(zhí)行狀態(tài)和結(jié)果。</Message>
</MergeVideoModelFaceResponse>

JSON格式

HTTP/1.1 200 OK
Content-Type:application/json

{
  "RequestId" : "334F180F-3B50-51CB-B4CB-9A86A542D3BC",
  "Message" : "該調(diào)用為異步調(diào)用，任務(wù)已提交成功，請以requestId的值作為jobId參數(shù)調(diào)用同類目下GetAsyncJobResult接口查詢?nèi)蝿?wù)執(zhí)行狀態(tài)和結(jié)果。"
}

返回示例補(bǔ)充說明

//查詢結(jié)果：請求示例
http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=GetAsyncJobResult
&JobId=E75FE679-0303-4DD1-8252-1143B4FA8A27
&<公共請求參數(shù)>

//查詢結(jié)果：返回示例
{
  "RequestId" : "43A0AEB6-45F4-4138-8E89-E1A5D63200E3",
  "Data" : {
    "Status" : "PROCESS_SUCCESS",
    "JobId" : "186AC396-0EEC-46F1-AAA1-BF3585227427",
    "Result" : "{\"VideoURL\":\"http://vibktprfx-prod-prod-aic-gd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-face-fusion/334F180F-3B50-51CB-B4CB-9A86A542D3BC-5716-20210906-074905.mp4?Expires=1630916420&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=OEtNqVYxXRwkyO4BrsYVJ8q5bx****\"}"
  }
}

//Result反序列化
{
  "VideoURL" : "http://vibktprfx-prod-prod-aic-gd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-face-fusion/334F180F-3B50-51CB-B4CB-9A86A542D3BC-5716-20210906-074905.mp4?Expires=1630916420&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=OEtNqVYxXRwkyO4BrsYVJ8q5bx****"
}

錯誤碼

關(guān)于模板視頻人臉融合的錯誤碼，詳情請參見常見錯誤碼。

安全聲明

• 請確保上傳的圖片或文件來源符合相應(yīng)的法律法規(guī)。
• 通過體驗調(diào)試上傳的臨時文件有效期為1小時，在24小時后會被系統(tǒng)自動清理刪除。