摘要
用于将特定预训练模型(106)适配于任务的方法,其中方法包括提供特定预训练模型(106),其中特定预训练模型(106)包括层,层被配置成取决于权重而将层的多维输入映射到层的多维输出,其中向量包括权重的子集,子集针对层的输出的维度而对多维输入的元素进行加权,其中该方法包括:提供训练数据,以及取决于训练数据和模型(106)的输出来学习用于适配权重的子集的变换的至少一个向量,其中至少一个向量具有单位长度,并且变换包括该至少一个向量与该至少一个向量的转置的外积,或者其中该至少一个向量被归一化成具有单位长度,并且变换包括归一化的至少一个向量与该归一化的至少一个向量的转置的外积。
技术关键词
预训练模型
数据字
基准
计算机
传感器
处理器
指令
元素
文本
信号
存储器
语义
音频
系统为您推荐了相关专利信息
鱼卵孵化器
闭环反馈优化
环境感知装置
孵化鱼卵
策略