一种多模态融合的沉浸式剧场交互控制系统

本发明公开了一种多模态融合的沉浸式剧场交互控制系统，包括：监控层，所述监控层中包括多模态输入系统，所述多模态输入系统用于采集剧场中座位上观众的各个模态数据，将所采集的模态数据上传数据处理层；数据处理层，所述数据处理层包括数据处理模块与多模态融合引擎，所述数据处理模块用于实时处理多模态输入系统上传的模态数据；所述多模态融合引擎用于同步对齐各个模态数据时空系。本发明，能够根据观众的个人与群体在观看时的意向来调整剧场舞台的状态，进而提高观众的观看体验，提高观众观看的沉浸度，增加沉浸式剧场的服务体验效果；减少了剧场交互延迟性，提高剧场执行层的反馈速度，提高观众的沉浸体验观感。