摘要
本发明涉及人工智能技术领域,可应用于金融科技、医疗健康及智能机器人等业务场景中,公开了一种基于环境语义图谱的决策方法、装置、设备及介质,包括:获取多模态输入数据并融合生成初始多模态融合特征,基于初始多模态融合特征构建和更新环境语义图谱,将环境语义图谱与初始多模态融合特征融合生成深度融合特征,基于深度融合特征确定当前动作分布,通过流匹配网络学习传输映射生成映射后动作分布,生成动作序列并根据环境交互反馈调整动作序列,结合环境交互反馈与奖励函数更新流匹配网络参数。本发明通过环境语义图谱与多模态特征融合,结合流匹配网络优化动作分布并动态调整动作序列,提升多模态决策性能与环境适应性。
技术关键词
语义图谱
融合特征
匹配网络
多模态
决策方法
生成动作
空间位置关系
语义实体
变换特征
序列
动态更新
数据
物体轮廓
生成三维结构
语法结构
动作特征
视觉特征
实例分割模型
系统为您推荐了相关专利信息
无人平台
二次规划方法
可变形卷积网络
多模态
视觉特征提取
双向信息交互
生成结构化数据
薪资管理系统
注意力
多模态
多层感知机
空间变换网络
有向图结构
输出特征
注意力