英偉達開源Audio2Face:AI實時生成面部動畫 多語言口型精準同步

神马作文网 教育资讯 22

快科技9月25日消息,據媒體報道,英偉達宣布將其生成式AI面部動畫模型Audio2Face正式開源,此次開放內容涵蓋基礎模型、完整軟體開發工具包及訓練框架,旨在推動遊戲與3D應用領域快速集成智能虛擬角色。

Audio2Face能夠基於輸入音頻,自動解析其中的音素、語調等聲學特徵,實時驅動虛擬角色生成精準的口型動作與自然的情感表情。

該技術可廣泛應用於遊戲開發、影視製作、虛擬客服等多個場景,並支持預錄製音頻的離線渲染與動態角色的實時流式處理兩種運行模式。

目前,該技術已在遊戲行業獲得實際應用。例如,遊戲開發商Survios在《異形:俠盜入侵進化版》中集成Audio2Face,顯著簡化了口型同步與面部動畫的製作流程。

Farm 51工作室也在《切爾諾貝利人2:禁區》中藉助該技術,直接通過音頻生成細膩的面部表情,不僅大幅節省製作時間,也提升了角色的真實感與玩家的沉浸體驗。該工作室創新總監Wojciech Pazdur稱其為「革命性突破」。


抱歉,评论功能暂时关闭!