文本数据的处理方法及装置、存储介质及电子设备

AITNT
正文
推荐专利
文本数据的处理方法及装置、存储介质及电子设备
申请号:CN202410772758
申请日期:2024-06-16
公开号:CN118656440A
公开日期:2024-09-17
类型:发明专利
摘要
本申请实施例提供了一种文本数据的处理方法及装置、存储介质及电子设备,其中,该方法包括:响应于获取到的输入文本,将输入文本转换为与输入文本对应的输入向量,其中,输入文本为请求端输入的请求文本;根据输入向量,使用大语言模型循环执行推理,对大语言模型输出的推理结果依次进行采样取词,并对采样取词得到的词元序列依次进行解码,得到一组解码结果;将一组解码结果依次与文本元素表中的文本元素进行匹配,并将从文本元素表中匹配出的文本元素输出给请求端,其中,文本元素表中包含预设的、允许向请求端输出的文本元素。通过本申请,解决了相关技术中的文本数据的处理方法存在显示模型输出的过程中存在乱码的问题。
技术关键词
文本 大语言模型 解码 元素 序列 电子设备 可读存储介质 处理器 转换单元 程序 数据 存储器 计算机 符号
系统为您推荐了相关专利信息
1
基于非线性单调函数的鲁棒张量主成分分析方法
主成分分析方法 非线性 噪声分量 增广拉格朗日 定义
2
一种基于协作学习与IoST数据的场景图生成方法
视觉特征 生成方法 语义向量 图片 场景
3
基于多模态信号的OSA患者分类方法、设备和介质
分类方法 多模态 分类子模型 静态特征 信号
4
目标识别方法、装置、非易失性存储介质和计算机设备
神经网络模型 非易失性存储介质 图像 多模态 文本
5
一种波雷达抗干扰的自适应调整方法
雷达抗干扰 回波 波形技术 雷达接收机 滤波器系数
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号