摘要
本申请提供了一种动作特征预测方法、模型训练方法、任务执行设备及介质,该动作特征预测方法包括:获取去噪过程中当前时间步的第一噪声视觉特征和第一噪声动作特征,其中,第一噪声视觉特征用于预测任务执行设备在未来时刻的周围环境信息,第一噪声动作特征用于预测任务执行设备在未来时刻的动作信息;确定第一噪声视觉特征和第一噪声动作特征之间的关联度信息,其中,关联度信息用于表征第一噪声视觉特征和第一噪声动作特征之间的影响程度;基于关联度信息对第一噪声视觉特征和第一噪声动作特征进行双模态交互的注意力计算,或对第一噪声动作特征进行自注意力计算,以得到预测的动作特征。本申请的技术方案能够提高动作特征的预测准确度。
技术关键词
动作特征
视觉特征
动作噪声
模型训练方法
执行设备
噪声预测
周围环境信息
样本
注意力
双模态
计算机程序产品
网络
文本
计算机设备
编码
控制模块
处理器
可读存储介质
电子设备
系统为您推荐了相关专利信息
交通标志识别
地图构建方法
车道检测
卷积神经网络模型
视觉特征
环境感知方法
特征融合方法
融合特征
视觉特征
空间坐标信息
生成对抗网络模型
生成模型训练方法
工况参数
波形
注意力
缺陷智能检测设备
线路板
多尺度特征提取
注意力
跨尺度特征融合