摘要
本发明公开一种融合多粒度文本语义信息的动量对比学习方法,包括:将文本数据输入到预训练的对比学习模型中,得到文本特征表征;其中,所述对比学习模型的训练方法包括:设置模型的超参数,并基于超参数构建对比学习模型;对训练数据进行数据增强,并构建语句和词元级别两种语义粒度的对比学习任务;基于构建的对比学习任务,使用训练数据对对比学习模型进行训练,得到训练后的对比学习模型。通过无监督的训练获得一个高质量的文本表征函数,从而能够将输入的文本数据映射到一个固定维度的特征表征,并可以直接或间接地助力于多个NLP下游任务中。
技术关键词
学习方法
语义
编码器模块
文本
样本
数据
非线性特征
解码器
词典
生成语句
超参数
传播算法
动态
处理器
同义词
计算机设备
无监督
系统为您推荐了相关专利信息
非结构化文本
半结构化文本
计算机程序指令
语义向量
统计特征提取
分拣机
特征识别模块
匹配模块
分拣控制技术
异常数据
医学图像分割方法
融合多模态信息
卷积模块
多模态磁共振图像
锚点