兄弟们,炸裂了!💥
Convai在 #CES2024 的NVIDIA特别直播中宣布了其最新游戏AI功能:场景感知和NPC行动生成功能。
与今年早些时候展示的技术有了非常大的进步。
由于是AI生成,演示中,同一场景NPC的每次对话可能都不一样,极大提高了游戏的体验,更牛P的是NPC现在能和玩家进行语音对话交流。
而且不仅限于对话,NPC还能自主执行任务!
同时利用生成式AI技术,NPC现在不仅能进行对话,还能执行复杂的动作,比如获取物品、跟随角色,甚至在游戏过程中动态执行复杂任务。
更牛的,游戏世界中的角色还可以互相聊天、分享想法,甚至指使其他NPC 执行行动任务。
Convai集成了ACE模块的Audio2face和Riva ASR
Audio2face:一个将音频信号转换为面部动画或表情的模块。在实际应用中,这意味着通过分析语音数据,该系统能够生成相应的面部表情,使得虚拟角色或NPC(的面部表情更加自然、逼真。
Riva ASR:ASR通常指的是自动语音识别(Automatic Speech Recognition),可以让系统理解和转录人类语音,将语音转换为文字,从而实现与人类用户的有效交互。
Convai通过整合这两个模块,可能是在努力提高其系统的交互能力和真实感,使得NPC能够更自然地响应语音输入,并以逼真的面部表情反映出来。