一种支持多模态交互的机器人操作系统及操作方法

本发明公开了一种支持多模态交互的机器人操作系统及操作方法，涉及智能机器人技术领域，所述系统包括：数据接收模块、目标对象识别模块、分析决策模块和响应模块；数据接收模块用于对获取到的多模态异构数据进行预处理，得到感官数据；其中，多模态异构数据包括视觉数据、听觉数据、触觉数据和语义数据中的至少一项；目标对象识别模块用于根据感官数据对目标对象建立对应的用户画像；分析决策模块用于根据用户画像进行偏好分析，并基于深度学习模型得出响应策略；响应模块用于基于响应策略发出操作指令。本发明实现了能够从用户的个体特征出发，更好地理解用户的需求并作出响应。