一种多模态交互的智能NPC对话意图匹配方法及系统

本发明涉及自然语言处理技术领域，具体为一种多模态交互的智能NPC对话意图匹配方法及系统。实时采集多模态数据，通过分模态预处理生成多模态语义特征；采用基于语义关联的跨模态融合模块整合各模态语义特征，基于语义上下文表征并结合语义解析模块和预定义意图模板，生成意图候选集合；通过持续语义学习机制和交互记忆模块，结合贝叶斯更新方法，实时跟踪用户意图变化，动态调整意图候选集合中各意图的置信度并筛选最终意图；构建NPC语义认知模型，通过语义一致性分析对用户输入与NPC对话状态进行语义检查；结合最终意图和决策引擎生成对话策略，并输出同步的响应内容；本发明提升了智能对话意图动态匹配的精度。