全球首个能听懂人类语言的FPS AI队友 腾讯魔方科隆游戏展首曝技术成果

AI究竟会如何改变游戏？这应该是全球游戏行业近年最为关注的问题之一。在最近正在德国举办的全球最大游戏展—科隆游戏展上，腾讯游戏魔方工作室群技术中心联合《暗区突围：无限》项目组，首次对外公布其全球首个语音指挥FPS AI F.A.C.U.L.的技术Demo。这是全球首次将大语言模型融合到FPS游戏的队友和自动交互中，属于业界前沿的技术尝试。目前，魔方AI技术团队正在为该技术申请10项专利。

“Bravo2从右边的卡车发起射击掩护，Brove3原地隐蔽，Bravo 4带我撤离”，在这段魔方工作室最新射击端游《ArenaBreakout:infinite》(《暗区突围：无限》)最新展示的AI技术视频里，玩家可以通过语言给AI智能队友下指令，而AI会根据指令密切配合玩家进行战术动作。

作为全球第一个能听懂人类语言的FPS AI队友，F.A.C.U.L.应用了最先进的生成式AI技术，包括语音输入，大语言模型，实时语音合成，和环境识别等，具备四大突出能力：

第一，直接分析复杂战术指令语言的能力。

在以往的FPS游戏中，玩家只能通过快捷键、指令轮盘向AI队友下达如跟随、防守、撤退等简单命令，而现在，智能队友不仅能够理解复杂如“二号，去前面带路”、“用前面那棵树做掩体”，甚至像“跑到前面用沙袋当掩体，再从沙袋绕到前方汽车后”这样更加复杂的、一系列的指令，使玩家的语言也成为战力的一部分。

第二，极强的环境感知能力。

目前，智能队友能够准确识别超10000个游戏内物体，如建筑物、汽车、可收藏物品等，能分辨颜色与材质，甚至能对天气情况进行报告，这一能力使玩家下达的“寻找一个绿色的箱子”、“帮我找大金（战利品）”等指令也能被准确执行，大大提升了AI与玩家进行战术配合的空间。

值得一提的是，该环境感知技术为全球首创，目前尚无其他游戏产品应用。

第三，优秀的策略执行能力。

智能队友不仅可以完成如侦查、投掷道具、开关门、找掩体等动作指令，还能够理解并执行“重复起立蹲下十次，吸引火力”、“一起当老六”等进阶指令，例如“我开门你扔雷”、“掩护我！封烟”、“你攻击敌人，我绕后”等强调队友间协作的动作，智能队友都可以完美完成。

第四，更拟真的交互能力。

不同于FPS游戏中常见的文字反馈或固定语音播放，智能队友能够推测玩家意图并进行实时语音反馈。当玩家询问“这一波打得爽不爽”时，智能队友会根据实际情况与玩家闲聊，而对于“你去舔包”、“给我一把枪”等涉及游戏成果的指令，智能队友会结合目前形势灵活选择听从或拒绝。

基于以上各项能力，智能队友能够及时反馈并完美执行玩家通过语音下达的各种复杂指令，使AI的应用深度结合局内环境与战斗行为，为FPS玩法探索更多的可能性。

据工作室负责人现场介绍，F.A.C.U.L.仍在内部训练测试阶段，目前只以技术demo方式呈现，未来还需要思考与解决”如何保证更公平的游戏环境”等关键问题。

与此同时，魔方AI技术团队正在探索AI技术于游戏里的更多应用可能，此前首创格斗游戏大规模强化学习方案“集海训练系统”并应用于《火影忍者》手游，使《火影忍者》手游成为全球首个应用AI学习的商业格斗游戏。

AI等前沿数字技术正在实现革命性突破，不断推动产业发展。一直以来，腾讯游戏在AI领域持续深耕，旗下天美、光子等工作室群在AI领域进行了不同方向的技术探索，如光子工作室研发的GVoice AI Codec技术，实现了语音AI Codec技术应用游戏行业零的突破；天美J3工作室实现了拟人 AI 与智能体动作生成技术的研发突破；腾讯在今年推出的自研AI引擎，让游戏场景制作、内容生成等领域的部分工作效率提升40倍以上。这次在科隆游戏展首次曝光的全球首个语音指挥FPS AI F.A.C.U.L.的技术Demo，则有望为FPS游戏带来全新的体验。