摘要
本发明涉及电力系统智能化技术领域,尤其是涉及一种电力系统大模型参数规模压缩与高性能计算资源优化方法,其包括获取预训练大模型、模型蒸馏生成轻量化小模型、稀疏裁剪优化结构及微调训练提升性能等步骤。本申请通过模型蒸馏、稀疏裁剪和半监督微调等技术手段,将模型参数量压缩至原始规模的10%‑30%,并降低推理延迟40%以上。同时,轻量化模型在电力智能问答、报告生成及新能源预测等场景中表现出高适用性与准确性,为电力行业智能化转型提供技术支持。
技术关键词
计算资源优化方法
电力系统
高性能
规模
深度学习框架
特征匹配技术
参数
终端设备
测试模块
滤波器组件
中间层
强化学习算法
蒸馏
学生
裁剪技术
裁剪模块
教师