摘要
本发明公开基于先计划再求解思维链的科学问答任务解决方法;属于计算机视觉和自然语言处理领域;科学问答任务解决方法包括:设计语义适配器与视觉编码器和语言模型连接,得到多模态网络模型,并使用科学问答数据集中的训练集数据对多模态模型进行语义适配器预训练;使用预训练后的多模态网络模型对次优的原理解释进行筛选,并使用先计划再求解思维链为次优的原理解释生成按计划的原理解释,并用按计划的原理解释优化原有的次优原理解释;使用集成了按计划的原理解释的训练数据,微调预训练过的多模态网络模型并进行测试,输出答案。
技术关键词
多模态网络
适配器
文本
语义
计划
训练集数据
模型预训练
解码器
生成答案
模态特征
标记
视觉特征
通信接口
计算机存储介质
计算机视觉
阶段
存储器
系统为您推荐了相关专利信息
智能家居控制方法
多模态
智能家居控制系统
设备资源管理
实时数据
行人路径规划方法
深度Q网络
动态行人
LSTM模型
环境修正方法
自然语言理解技术
实体识别模型
报告
邮件
整理方法
自动化测试方法
数据同步
端口
容器
SQLServer数据库