(資料圖片)
近日,百度旗下北京百度網(wǎng)訊科技有限公司“虛擬對(duì)象驅(qū)動(dòng)方法、深度學(xué)習(xí)網(wǎng)絡(luò)的訓(xùn)練方法及裝置”專利獲得授權(quán)。
專利摘要顯示,本公開提供了一種虛擬對(duì)象驅(qū)動(dòng)方法、深度學(xué)習(xí)網(wǎng)絡(luò)的訓(xùn)練方法及裝置、設(shè)備、介質(zhì)和產(chǎn)品,涉及人工智能領(lǐng)域,尤其涉及深度學(xué)習(xí)、計(jì)算機(jī)視覺、虛擬/增強(qiáng)現(xiàn)實(shí)和圖像處理技術(shù)領(lǐng)域,可應(yīng)用于虛擬數(shù)字人、元宇宙等場(chǎng)景。
專利具體實(shí)現(xiàn)方案包括:響應(yīng)于獲取的語音數(shù)據(jù),確定基于語音數(shù)據(jù)的初始語音特征;對(duì)初始語音特征進(jìn)行時(shí)序增強(qiáng)處理,得到目標(biāo)語音特征;基于目標(biāo)語音特征和目標(biāo)虛擬對(duì)象的基準(zhǔn)面部圖像,生成針對(duì)目標(biāo)虛擬對(duì)象的唇形圖像序列;以及根據(jù)唇形圖像序列,對(duì)目標(biāo)虛擬對(duì)象進(jìn)行驅(qū)動(dòng),以使目標(biāo)虛擬對(duì)象執(zhí)行與語音數(shù)據(jù)匹配的唇部動(dòng)作。
據(jù)悉,該專利能使虛擬人發(fā)聲時(shí)唇部肌肉運(yùn)動(dòng)更加自然,貼近真人。借助這一技術(shù)和百度類ChatGPT項(xiàng)目文心一言(ERNIE Bot),百度有望推出與用戶對(duì)話更加自然的高擬真度虛擬形象。
(文章來源:上海證券報(bào)·中國(guó)證券網(wǎng))