基于动态温度因子改进的长上下文大模型的文本处理方法、装置、设备、存储及程序

本发明实施例公开了一种基于动态温度因子改进的长上下文大模型的文本处理方法、装置、设备、存储及程序，其中，方法包括：获取目标数据集；其中，所述目标数据集包括扩展长度文本数据；将所述目标数据集输入至目标大模型中，以通过所述目标大模型对所述目标数据集进行文本处理，得到模型处理结果；其中，所述目标大模型采用动态温度因子对所述目标大模型的各注意力头进行动态调整。本发明实施例的技术方案能够自适应地调整大模型中各注意力头的注意力权重，增强大模型对长文本和复杂依赖关系的处理能力，从而提升大模型的泛化能力。