一种多模态智能机器人系统及交互方法

本发明涉及一种多模态智能机器人系统及交互方法，属于机器人数字数据处理技术领域，包括如下步骤：步骤S1：多模态输入采集；步骤S2：多模态输入预处理；步骤S3：多模态信息融合，输入至预训练的多模态特征融合模型，通过量化特征数据融合机制对各模态特征进行特征融合，得到用户交互意图向量以及用户情绪状态向量；步骤S4：交互响应生成，基于用户交互意图向量匹配预设的交互响应策略库，得到基础响应内容，结合用户情绪状态向量对基础响应内容进行情绪适配调整，生成包含文本信息、语音信息以及动作信息的多模态响应内容；步骤S5：交互反馈执行；本发明有益效果：通过基础响应内容、用户情绪状态向量，实现机器人融合多模态信息、动态优化交互。