索尼承諾將“增加PS5主機(jī)供應(yīng)”
2023-01-31
人臉重演新突破，網(wǎng)易互娛AI Lab論文突圍史上最火ECCV
更新時(shí)間：2022-07-20 18:11:54作者：佚名
近日，網(wǎng)易互娛AI Lab論文《基于單張照片的實(shí)時(shí)高分辨率人臉重演算法》（《Face2Faceρ:Real-Time High-Resolution One-Shot Face Reenactment》）入選了人工智能國(guó)際頂會(huì)ECCV 2022。該論文創(chuàng)新性地提出了一種人臉重演的新方法，在保證生成質(zhì)量的同時(shí)，最高可將算法速度最高提升至原來的9倍。
據(jù)悉，ECCV是計(jì)算機(jī)視覺領(lǐng)域內(nèi)首屈一指的頂尖國(guó)際研討會(huì)，每?jī)赡昱e辦一次，每一屆都吸引了皆來自世界各地的頂尖專家學(xué)者參與。本屆論文總投稿數(shù)達(dá)到了5803篇，再創(chuàng)歷史新高，堪稱“史上最火ECCV”。本屆大會(huì)最終入選論文數(shù)量為1650篇，接收率僅為28%，不足三成，可見其競(jìng)爭(zhēng)之激烈、難度之高。
在網(wǎng)易互娛AI Lab入選的本篇論文中，研究團(tuán)隊(duì)創(chuàng)新地提出了一種能夠基于單幅圖片的實(shí)時(shí)高分辨率人臉重演算法，用于將驅(qū)動(dòng)人臉說話時(shí)的面部表情和頭部姿態(tài)實(shí)時(shí)遷移至靜態(tài)圖像的人臉上，從而實(shí)現(xiàn)對(duì)姿態(tài)和表情的“復(fù)制粘貼”。在生成效果方面，該方案相比目前常見的基于形變（warp-based）或直接合成（direct synthesis）的方法，無論是對(duì)于編輯前后的人臉身份保持、還是對(duì)于頭部大姿態(tài)改變時(shí)的生成結(jié)果，都能取得甚至超越目前的已有方案；而在運(yùn)行效率方面，該方案在顯著降低算法復(fù)雜度的基礎(chǔ)上，將速度最高提升至目前方案的9倍，大大降低了內(nèi)存開銷和生成速度。
人臉重演效果對(duì)比
近年來，人臉重演技術(shù)因其在媒體、娛樂、虛擬現(xiàn)實(shí)等方面的應(yīng)用前景而備受關(guān)注，其最直接的幫助就是能夠幫助提升音視頻的制作效率。去年，網(wǎng)易互娛AI Lab也將該技術(shù)成功應(yīng)用于AI合成新聞主播制作，并與《羊城晚報(bào)》攜手推出了“羊小晚”和“羊小派”兩位虛擬新聞主播，幫助自動(dòng)生成新聞播報(bào)視頻，以降低制作成本、提升制作效率，促進(jìn)新聞生產(chǎn)的智慧變革。