產(chǎn)品概述
什么是虛擬數(shù)字人
虛擬數(shù)字人是基于達(dá)摩院在語(yǔ)音、圖像、3D美術(shù)、自然語(yǔ)言處理等領(lǐng)域的技術(shù)優(yōu)勢(shì)，以AI驅(qū)動(dòng)實(shí)時(shí)渲染為核心能力，構(gòu)造的多模態(tài)交互數(shù)字人。我們提供「數(shù)字人開(kāi)放平臺(tái)」，其中包含以實(shí)時(shí)交互為目標(biāo)的「數(shù)字人流媒體」產(chǎn)品、以效率化內(nèi)容生產(chǎn)為目標(biāo)的「數(shù)字人視頻合成」產(chǎn)品，同時(shí)我們提供以直播帶貨為核心能力的「品牌智能直播間」產(chǎn)品。
數(shù)字人開(kāi)放平臺(tái)
3D數(shù)字人流媒體：提供實(shí)時(shí)驅(qū)動(dòng)3D數(shù)字人進(jìn)行文本播報(bào)的產(chǎn)品能力。支持通過(guò)API向服務(wù)端發(fā)送文本，服務(wù)端接收到數(shù)據(jù)后處理成數(shù)字人的聲音、表情、口型、動(dòng)作，然后將對(duì)應(yīng)數(shù)據(jù)通過(guò)流媒體技術(shù)合成視頻流，輸出到對(duì)應(yīng)的流媒體渠道，如官方的阿里云RTC，或者客戶指定的RTMP流媒體服務(wù)器，然后客戶可以通過(guò)對(duì)應(yīng)的流媒體渠道客戶端SDK進(jìn)行拉流展示到對(duì)應(yīng)的顯示端，如大屏、手機(jī)、web頁(yè)面等。3D數(shù)字人流媒體產(chǎn)品支持播報(bào)數(shù)字人、互動(dòng)數(shù)字人、推流數(shù)字人三種模板，分別適合用作數(shù)字人資訊播報(bào)、數(shù)字人客服助理、數(shù)字人虛擬直播等場(chǎng)景。其中互動(dòng)數(shù)字人需要結(jié)合智能對(duì)話機(jī)器人一起使用。
3D/2D數(shù)字人視頻合成：提供離線驅(qū)動(dòng)3D/2D數(shù)字人進(jìn)行文本播報(bào)生成對(duì)應(yīng)視頻的產(chǎn)品能力。支持通過(guò)API以及SaaS頁(yè)面兩種方式向服務(wù)端發(fā)送文本，服務(wù)端接收到數(shù)據(jù)后處理成數(shù)字人的聲音、表情、口型、動(dòng)作，然后將對(duì)應(yīng)數(shù)據(jù)合成指定格式的視頻，并提供對(duì)應(yīng)的視頻下載地址，客戶可以從下載地址下載對(duì)應(yīng)的數(shù)字人視頻進(jìn)行二次編輯和投放。
品牌智能直播間
淘寶天貓平臺(tái)商家可以在淘寶直播平臺(tái)上，通過(guò)“品牌智能直播間”所提供的虛擬數(shù)字人主播和虛擬人直播運(yùn)營(yíng)平臺(tái)實(shí)現(xiàn)在其店鋪直播間，讓虛擬人電商主播像真人電商主播一樣，進(jìn)行商品介紹售賣以及和觀眾進(jìn)行互動(dòng)。直播間觀眾在觀看直播的過(guò)程中會(huì)看到由虛擬數(shù)字人主導(dǎo)進(jìn)行的直播內(nèi)容，并可以與虛擬人主播進(jìn)行對(duì)話和頁(yè)面點(diǎn)擊操作方式的互動(dòng)。