摘要
本发明涉及自然语言处理和机器学习领域,公开了一种利用对齐的多模态特征进行几何问题推理方法及系统,包括以下具体步骤:初始化几何问题的训练数据集以及基于预训练的中文CLIP模型的几何问题推理模型;将多模态数据输入几何问题推理模型中进行训练,训练流程中引入动态词表,得到训练好的几何问题推理模型;获取待推理的几何问题并将其输入训练好的几何问题推理模型中,得到几何问题推理结果。本发明解决了现有技术存在的无法充分利用跨模态语义表示对几何问题进行求解的问题,且具有能够产生更精确的推理结果的特点。
技术关键词
融合特征
文本编码器
图像编码器
模型训练模块
推理方法
跨模态
解码
数据获取模块
变量
BERT模型
程序
动态
多模态特征
网络
系统为您推荐了相关专利信息
裂缝图像分割方法
上采样
解码器
全局平均池化
输出特征
发热伴血小板
风险预测模型
梯度提升树
变量
综合征患者
电池状态参数
元胞
动态
车辆状态数据
热管理方法
分割图像数据
分割方法
多尺度
边缘保留滤波
编码器模块
风险评估系统
多模态
数据特征提取
分类器
跨模态