一种基于元宇宙的智能化人机交互系统

本发明涉及人机交互技术领域，且公开了一种基于元宇宙的智能化人机交互系统，用于解决进行人机交互时，会出现各虚拟模块可能同时发起响应导致卡顿的问题，包括，构建元宇宙场景，采集用户在元宇宙场景中的多模态行为信息，将多模态行为信息进行统一格式化处理，得到格式化多模态行为信息，对格式化多模态行为信息，采用自然语言处理引擎与多模态融合模型联合推理，得到结构化命令数据，根据结构化命令数据获得需要做出响应动作的元宇宙场景内的虚拟模块，记为被驱动模块，获取所有被驱动模块的优先级信息，评估得到优先指数，根据优先指数驱动模块做出响应动作，有效提高交互响应效率与用户体验连贯性。