一种基于场景感知信息的多模反馈智能交互系统

本发明提供一种基于场景感知信息的多模反馈智能交互系统，包括用户、提问收集模块、传感模块、EMO模型、数据整合模块、心理LLM模块：用户提供语音及文本指令；提问收集模块收集用户发出的提问文本和提问音频；传感模块收集提问音频，并传递给EMO模型；EMO模型根据收集传感模块的信息对情绪数据进行定量处理；数据整合模块将所述提问收集模块提供的数据库进行整合；整合后输送至心理LLM模块；心理LLM模块经过算法整合后将确定出与提问文本和提问音频相对应的指令执行结果，根据指令执行结果判定用户感知类型，根据用户感知类型确定反馈信息结果，并将结果通过表情及语气反馈给传感模块和用户。本发明实现了通过动态情感感知实现个性化人机情景交互。