摘要
本发明提供了一种运检机器人的作业决策方法、装置、系统及介质。实现方案为:构建多个正样本对和多个负样本对;基于多个正样本对和多个负样本对,对跨模态语义对齐模型进行训练,并采用训练好的跨模态语义对齐模型对各个正样本对进行语义对齐,得到语义对齐的知识向量,并将知识向量存入多模态运检知识库中;响应于针对运检机器人的作业请求文本,基于跨模态语义对齐模型对作业请求文本进行语义对齐,得到语义对齐的作业请求文本向量;在多模态运检知识库中,检索与作业请求文本向量相似的目标知识向量;基于目标知识向量和作业请求文本,生成运检机器人的作业动作指令。本申请实施例可提高运检机器人在作业决策的准确性。
技术关键词
查询关键词
机器人
语义
样本
多模态
跨模态
指令
文本特征向量
图像特征向量
决策方法
风险
决策系统
计算机
对齐模块
处理器通信
系统为您推荐了相关专利信息
驱动机器人手指
摆动杆
关节
接近觉传感器
角度传感器
事件识别方法
云端
协同训练算法
场景
上下文特征
损伤评估方法
船舶撞击桥梁
序列
爬壁机器人
加速度