一种基于多模态感知的人机协同度建模与评估系统及其方法

本发明公开了一种基于多模态感知的人机协同度建模与评估系统及其方法，旨在实现人机协作过程中的实时量化评估与动态调控。系统包括多模态感知模块、特征融合与提取模块、人机协同度建模模块、个性化交互策略反馈模块和任务记录与评估模块。多模态感知模块通过视觉、语音、生理信号和交互动作等多源数据采集用户状态；特征融合与提取模块采用注意力机制整合多模态特征；人机协同度建模模块基于监督学习方法构建评估模型，输出量化评分；个性化交互策略反馈模块根据评分动态调整机器人行为策略；任务记录与评估模块支持数据记录、趋势分析和用户画像构建。系统能够全面感知用户状态，实时评估协作质量，并动态优化机器人行为。