一种与玩家交互的智能NPC系统技术方案

本发明专利技术公开一种与玩家交互的智能NPC系统，多模态模型和前端系统；所述多模态模型和所述前端系统通信相连；所述多模态模型包括语音转文字模块、智能问答模块、文字转语音模块以及动作表情生成模块；所述前端系统根据来自所述动作表情生成模块的动作序列和表情变化信息，控制NPC角色模型执行对应的动作。采用本发明专利技术，多模态模型根据玩家提出的问题，而生成回复，回复的文字也会生出对应的语音，语音跟随NPC的动作一起回复给玩家，从而在前端系统形成一个与玩家交互的具有“独立思维”的NPC虚拟人，为了今后更加逼真、更加模拟真实的游戏提供保障。

【技术实现步骤摘要】

本专利技术涉及深度学习领域，尤其涉及一种与玩家交互的智能npc系统。

技术介绍

1、基于ai的npc系统已经被广泛应用于各种类型的游戏中，但其智能性与gpt-3等模型效果相差甚远，不具备足够的真实感。学术类模型在实际应用中，工程化程度较差，不能直接应用于电子游戏或元宇宙中。

2、具体表现上来说，上述现有技术会面临以下的问题：1)反馈内容枯燥单一，在面对大量玩家时，即使是多项选项也是显得很单一，在本质上与传统的npc并没有太大的变化；2)无法照顾玩家情绪，一个固定的回答内容有时候并不能让玩家真正理解游戏剧情的表达内容，需要玩家反复点击、反复理解。在这种情绪之下极大可能造成玩家心情烦躁，造成不佳的游戏体验；3)成本持续增高，工作人员持续为npc添加多选项反馈，会造成游戏npc的设计负担，同时让企业承担更高的费用，在工作量增大。

技术实现思路

1、本专利技术实施例提供一种与玩家交互的智能npc系统，玩家输入相对应的剧情任务内容文字或者语音，多模态模型根据玩家不同的输入生成相应的语音，同时操纵npc实现各本文档来自技高网...

【技术保护点】

1.一种与玩家交互的智能NPC系统，其特征在于，包括：多模态模型和前端系统；所述多模态模型和所述前端系统通信相连；

2.如权利要求1所述与玩家交互的智能NPC系统，其特征在于，所述语音转文字模块包括音频输入接口、预处理单元、深度学习识别模型单元和后处理单元；

3.如权利要求2所述与玩家交互的智能NPC系统，其特征在于，所述预处理单元对所述玩家语音信号进行降噪、分帧和加窗后进行特征化，得到玩家语音特征；

4.如权利要求1所述与玩家交互的智能NPC系统，其特征在于，所述智能问答模块包括自然语言理解子模块、知识检索与推理子模块、答案生成子模块以及情感分析与个...

【技术特征摘要】

1.一种与玩家交互的智能npc系统，其特征在于，包括：多模态模型和前端系统；所述多模态模型和所述前端系统通信相连；

2.如权利要求1所述与玩家交互的智能npc系统，其特征在于，所述语音转文字模块包括音频输入接口、预处理单元、深度学习识别模型单元和后处理单元；

3.如权利要求2所述与玩家交互的智能npc系统，其特征在于，所述预处理单元对所述玩家语音信号进行降噪、分帧和加窗后进行特征化，得到玩家语音特征；

4.如权利要求1所述与玩家交互的智能npc系统，其特征在于，所述智能问答模块包括自然语言理解子模块、知识检索与推理子模块、答案生成子模块以及情感分析与个性化处理子模块；

5.如权利要求4所述与玩家交互的智能npc系统，其特征在于，所述自然语言理解子模块采用基于transformers架构的预训练的自然语言理解模...

【专利技术属性】
技术研发人员：丁烨，姜迪，范力欣，
申请(专利权)人：深圳大学，
类型：发明
国别省市：