参数优化方法、设备及计算机可读介质

本申请实施例提供了参数优化方法、设备及计算机可读介质，该方案通过将低秩矩阵与稀疏性约束相结合的方式，在迭代更新过程中基于敏感度对低秩矩阵进行剪枝处理，从而实现矩阵的稀疏化，保留敏感度较高的重要参数，使得预训练权重矩阵中的参数更新有选择性和精细化，提升了训练的稳定性和效率，并且可以保证特定领域知识的完整性，有效避免知识冲突和遗忘，使得训练后的模型性能更好。