摘要
本发明提供了一种运检机器人的作业决策方法、装置、系统及介质。实现方案为:构建多个正样本对和多个负样本对;基于多个正样本对和多个负样本对,对跨模态语义对齐模型进行训练,并采用训练好的跨模态语义对齐模型对各个正样本对进行语义对齐,得到语义对齐的知识向量,并将知识向量存入多模态运检知识库中;响应于针对运检机器人的作业请求文本,基于跨模态语义对齐模型对作业请求文本进行语义对齐,得到语义对齐的作业请求文本向量;在多模态运检知识库中,检索与作业请求文本向量相似的目标知识向量;基于目标知识向量和作业请求文本,生成运检机器人的作业动作指令。本申请实施例可提高运检机器人在作业决策的准确性。
技术关键词
查询关键词
机器人
语义
样本
多模态
跨模态
指令
文本特征向量
图像特征向量
决策方法
风险
决策系统
计算机
对齐模块
处理器通信
系统为您推荐了相关专利信息
神经网络模型
景深
非金属夹杂物
微调镜头
图像识别技术