摘要
本申请公开了大模型解码约束方法、设备及介质,涉及模型处理领域,方法包括:基于FST模型、DFA模型,形成联合约束模型;基于大语言模型进行解码,生成对应词汇表的概率得分;基于联合约束模型对词汇表中的最小文本单元进行排除,输出的指定最小文本单元;基于待判定因子,对指定最小文本单元的结构进行动态调整,更新大语言模型的输出。不强制固定输出格式,允许模型自由生成中间推理步骤,与传统结构化生成相比,避免与自然生成逻辑冲突,保留生成灵活性。
技术关键词
约束方法
DFA模型
文本
大语言模型
状态转换器
状态自动机
解码
组合式
计算机可执行指令
因子
字符
动态
约束设备
处理器通信
标签
存储器
介质
系统为您推荐了相关专利信息
呼叫中心
多模态响应
语音接收模块
自动语音识别
语音机器人
文本生成图像
图像特征信息
图像增强
语音识别模型
内容生成方法
自然语言技术
计算机执行指令
随机森林模型
客户
文本
导航方法
大语言模型
路径规划算法
生成导航路线
交通状况信息
数据
语义特征
文本情感分析方法
深度特征提取
多视角