基于改进型大语言模型的智能应答方法及相关设备

本申请属于研发设计技术领域，涉及基于改进型大语言模型的智能应答方法及相关设备，通过获取目标长文本数据；输入到预训练完成的改进型大语言模型；得到问题文本特征序列；利用稀疏注意力机制筛选出问题文本特征序列中所有问题文本特征所对应的最优应答文本特征；结合位置编码机制对最优应答文本特征进行汇总整理，生成最终的应答文本特征序列；利用文本特征解码组件对最终的应答文本特征序列进行解码处理，输出最终的应答文本。实现了对问题长数据进行应答数据生成时，仅仅筛选出最优应答文本特征进行应答文本生成，在显著提高模型的处理效率和应答文本生成效率的同时，又尽量保证应答结果的准确性。