多模态的虚实交互沙盘展示方法及装置

本申请实施例提供一种多模态的虚实交互沙盘展示方法及装置，方法包括：基于数字地球，通过数字孪生技术，MR/VR/AR技术，并结合实体沙盘构建一种多模态的虚实交互沙盘，根据地球实体沙盘的实时图像信息生成的空间位置标识码对地球虚拟沙盘进行分层位姿调整，以使地球虚拟沙盘位姿与地球实体沙盘位姿与视角完全吻合，得到虚实交融的沙盘，根据多级场景架构和混合渲染管线对该沙盘进行虚实融合渲染，得到虚实渲染沙盘，结合键盘、操纵杆、手柄、手势、语音、激光笔等多形态交互手段，实现多玩家思想的协同交互，当用户进行视口变更时，根据场景流送半径对所述子场景内容进行展示，本申请能够提高多模态的虚实交互沙盘展示和交互的效率和灵活性。