摘要
本发明公开了一种复杂场景态势理解方法、系统、设备及介质,涉及行为理解技术领域,该方法提供了适用于多模态对象行为关联的网络模型,实现了不同模态之间的复杂关联分析。构建统一的多模态处理方法以应对任意的多模态关联情况,实现基于终身持续学习的理念构建态势理解增强模型,以应对不同的新型数据的态势理解。利用预训练大语言模型挖掘有效的通用表征,同时捕获图结构化先验知识与动态输入关联性,引导大语言模型的强大的特征提取能力和泛化能力完成多种下游态势理解任务。解决了当前态势感知与理解自动化程度低、智能性不足的问题。
技术关键词
结构先验知识
跨模态
移动轨迹数据
场景
大语言模型
存储程序代码
解码器
关键点
语义
基础
多头注意力机制
编码模块
特征提取能力
编码器模块
识别模块
多模态特征
理解系统
系统为您推荐了相关专利信息
建筑信息模型
生成工艺技术
检索管控方法
图谱
检索策略
监控方法
实时视频流
安全帽系带
抗干扰特征
退化模型