多模态感知融合的VR触觉反馈系统及其方法

本发明涉及虚拟现实技术领域，具体涉及多模态感知融合的VR触觉反馈系统及其方法，包括触觉交互端、分布式触觉反馈端、分布式信号采集单元、计算机系统、触觉呈现设备、视觉设备和听觉设备，本发明的核心在于分布式触觉反馈端中的触觉预测单元，通过构建基于矩阵理论的3D内容触觉预测算法，利用触觉纹理矩阵和触觉材质矩阵实现视觉特征与触觉特征的精确映射，并创新性地采用高维矩阵表征触觉特征空间、基于矩阵谱分析技术实现触觉特征的自适应调整、通过多尺度矩阵分解与融合算法实现从宏观到微观的触觉纹理重建，本发明解决了传统VR触觉反馈系统中触觉特征表达能力有限、缺乏自适应性、多模态感知协同不足等问题。