基于地图引导的场景感知少样本声学建模方法、装置、设备及介质

本发明公开了一种基于地图引导的场景感知少样本声学建模方法、装置、设备及介质，其中方法包括：获取图像数据，根据图像数据提取视觉特征，从视觉特征中提取场景语义特征；根据提取的场景语义特征，将不同姿态获取到的场景特征对齐融合，获得场景特征地图；获取查询坐标，根据查询坐标和场景特征地图获取查询特征，根据查询特征获得目标RIR。本发明提出了地图引导的场景感知方案，通过提取不同视觉观测中声学相关的语义特征，并借助深度映射进行特征对齐融合，获得整个场景的特征信息，增强模型对房屋结构、房屋布局、物体语义等空间信息的理解。本发明可广泛应用于AR、VR等虚拟建模领域。