一种基于大模型和自然人机交互的生成式MR工业巡检方法

一种基于大模型和自然人机交互的生成式MR工业巡检方法，属于智能巡检技术领域。为解决MR巡检开发周期长和成本高的技术难题，本发明包括利用MR头显设备采集待巡检的场景图像序列，构建巡检的场景图像数据集，利用巡检的场景图像数据集对多模态大模型进行训练，得到待巡检的类别序列信息数据；采集对应的空间定位信息和交互信息，基于采集的空间定位信息和交互信息构建巡检模块数据集，然后利用巡检模块数据集对巡检模块进行训练，得到巡检模块的检查序列的拟检测信息；拟合待巡检的类别序列信息和各巡检模块的检查序列的拟检测信息，得到巡检执行模型；利用巡检执行模型，执行基于大模型和自然人机交互的生成式MR工业巡检过程。