摘要
本发明涉及人工智能技术领域,可应用于金融科技及医疗健康等业务场景中,公开了一种基于专家子路径的任务处理方法、装置、设备及介质,包括:在神经网络中设置共享注意力层、理解专家子路径、控制专家子路径和路由器模块,构建机器人动作轨迹数据集、视觉文本对数据集和结构化语言模板集合,先基于机器人动作轨迹数据集和结构化语言模板集合训练得到中间训练模型,再基于中间训练模型和视觉文本对数据集训练生成统一训练模型,接收目标任务输入时由路由器模块选择对应专家子路径,并通过统一训练模型输出结果。本发明通过分阶段训练结合专家混合机制,避免灾难性遗忘,使语义理解与机器人控制在统一模型中保持稳定共存,提高任务执行的准确性。
技术关键词
路由器
文本
跨模态融合特征
轨迹
模板
数据
模块
视觉
多模态
注意力
样本
语义
图像
网络架构
参数
计算机设备
机器人控制
人工智能技术
生成场景
系统为您推荐了相关专利信息
视觉感知特征
多模态特征
风格
注意力机制
语义特征