摘要
本发明公开了一种基于多模态大模型区域生成的高速应急车道占用告警方法,该方法包括以下步骤:S10、多模态大模型的搭建,基于Transformer深度神经网络搭建多模态大模型,所述多模态大模型包括文本信息提取模块、图片特征提取模块以及多模态特征融合模块;S20、图片数据的收集和处理,收集高速公路的图片数据,并通过人工标注区域和描述图片信息;S30、多模态大模型的训练;S40、应急车道占用告警;本发明的有益效果是:利用多模态大模型解决在高速场景下应急车道区域生成的标注成本高、泛化性能低、不灵活、不自动化的问题。
技术关键词
告警方法
文本信息提取
车辆识别模型
占用应急车道
图片
特征提取模块
多模态特征融合
深度神经网络
融合特征
数据
视频解码
像素点
异常点
上采样
系统为您推荐了相关专利信息
欺诈检测方法
图片
广度优先搜索算法
交易特征
节点
托辊
特征提取网络
视频
工业输送机设备
带式输送机
任务调度方法
AI算法
执行算法
关系型数据库
任务调度装置