针对之前闯入两位网络歌手的直播间,这一次英伟达利用AI制造了一个玩具詹森二重身,演唱了《铃儿响叮当》。
黄仁勋说,虽然他不擅长唱歌,但他使用了由英伟达的语音AI,计算机视觉,自然语言理解,推荐引擎和模拟技术组成的Omniverse Avatar,创建了玩具简森虚拟化身,并用这个化身演唱了众所周知的圣诞歌曲《铃儿响叮当》,以回应两位歌手。
英伟达的创作团队导入了英伟达Omniverse Avatar云引擎平台的云原生AI微服务和工作流程,利用最近开发的语音转换模型,从样本中提取专业歌手的声音,然后转换成玩具Jensen的声音然后通过Audio2Face,Audio2Gesture等技术,为整场演出生成逼真的面部表情和肢体动作