摘要
本发明公开了一种基于跨模态对比学习的机器人设计知识推荐方法,包括以下步骤:从机器人机构的拓扑和参数特征出发,构建机器人机构图;构建机器人机构图所对应的语义标签;将机器人机构图、语义标签、ID编号以三元组的形式存储,建立数据库,形成数据集;搭建对比学习框架,进行模型训练;通过训练得到的文编码器和图编码器对任意输入得到推荐结果。本发明建立了合理的机器人机构表征方法以及多模态知识表征体系:融合文本、图结构等多源异构数据,构建了结构化的知识模型,表达设计知识间的复杂语义关系。本发明通过跨模态对比学习捕获不同模态间的语义一致性,学习到更具判别性的知识表示,提高了推荐系统的理解能力和推荐准确度。
技术关键词
机器人机构
知识推荐方法
语义标签
跨模态
预训练语言模型
节点特征
三元组
大语言模型
矩阵
位置编码信息
运动
多头注意力机制
数据
正则化方法
文本编码器
系统为您推荐了相关专利信息
跨模态数据
时空耦合关系
动态贝叶斯网络
模态特征
多时空尺度
激光雷达扫描仪
人形机器人
激光雷达扫描系统
池化方法
语义特征提取
3D点云数据
无人机
粒子滤波算法
激光雷达传感器
语义标签
命名实体识别方法
语义
集成模块
局部特征信息
卷积模块
工作报告生成方法
预训练语言模型
协同数据处理
命名实体识别
非结构化文本