一种基于多模态大模型的动态场景识别与AR信息叠加方法

本发明涉及人工智能技术领域，公开了一种基于多模态大模型的动态场景识别与AR信息叠加方法，通过考虑每个子任务执行人员的任务执行操作速度和协作设备候选集中每个协作设备部署的多模态大模型库与硬件资源，构建以通信延时与硬件资源的约束条件集和协作设备运算负荷的优化目标，采用优化算法求解工业协作执行策略，驱使每个子任务执行人员配置对应的协作设备执行分配到的工业协作子任务。由此，本发明采用灵活分配调度部署有不同多模态大模型库的协作设备，利用目标协作设备与关联协作设备之间建立的通信链路，将每个工业协作子任务的数据处理动作交由对应多模态大模型的协作设备进行处理，提升了增强现实工业辅助系统的稳定性与实时性。