一种支持多任务切换的多模态数据处理方法及相关设备

本发明提供了一种支持多任务切换的多模态数据处理方法及相关设备，该方法应用于机器人技术领域，该方法为：获取机器人当前所处环境的环境图像、历史任务指令、当前任务指令、机器人状态和机器人动作噪声；利用环境图像、历史任务指令和当前任务指令，生成融合特征和多任务条件特征；从机器人状态中提取机器人状态特征；将机器人动作噪声、融合特征、多任务条件特征和机器人状态特征输入预设的动作专家模型进行动作决策，以得到机器人的最优动作序列。本方案依据历史任务指令、当前任务指令和环境图像来获得机器人的最优动作序列，有效解决了机器人发生任务切换时的复杂性问题，提高任务切换时输出的机器人动作的准确率。