摘要
本发明涉及电力作业教学技术领域,特别涉及面向电力作业教学的多模态数据融合VR场景自动化建模方法,通过深度学习驱动的语义识别与标签生成方法,能够高效、准确地从多模态数据中提取出电力作业相关的关键语义信息,通过引入图神经网络结构进行多模态融合,有效克服了传统建模方式中“数据割裂”“语义缺失”“场景僵化”等问题,实现了从“低层感知”到“高层理解”的全面过渡,使生成的三维VR场景模型更加接近真实电力作业环境,通过自动化生成和嵌入教学脚本,系统实现了虚拟教学内容与实际作业流程的高度一致,有效避免了传统人工录入脚本过程中的主观性和不一致问题,有效提升了教学场景的可视化效果与实时响应能力。
技术关键词
自动化建模方法
多模态数据采集
标准化教学
场景
语义
深度学习模型对图像
神经网络结构
脚本
神经网络对图像
电力作业现场
标签生成方法
语音记录仪
预训练语言模型
视觉真实感
文本