Omniverse Audio2Face 是一个参考应用程序,可简化 3D 角色的动画以匹配任何画外音轨道。它预装了一个 3D 角色模型,可以用画外音轨道进行动画处理,音频输入被馈送到预训练的深度神经网络,输出驱动角色网格的 3D 顶点以创建面部动画即时的。它还具有角色转移功能,允许用户重新定位到任何 3D 人或类人脸,并允许他们使用场景中的多个角色缩放输出并使用 AI 网络控制角色的情绪。它还具有允许混合形状转换和混合权重导出选项的数据转换功能,并支持使用 Blender 和 Epic Games Unreal Engine 的 Blendshapes 导出导入,为角色生成运动。
当前网址国内可以直接访问