一种协同大模型和推荐小模型计算的方法及系统

AITNT
正文
推荐专利
一种协同大模型和推荐小模型计算的方法及系统
申请号:CN202411120312
申请日期:2024-08-15
公开号:CN119046538B
公开日期:2025-10-21
类型:发明专利
摘要
本发明公开了一种协同大模型和推荐小模型计算的方法及系统。本发明的方法通过设计端云协同的推荐模型框架,由基于云的大型模型利用历史数据生成候选列表和初始排名,在端侧设备上的小型模型使用最新的用户数据动态重新排列此列表。协同决策请求通过评估大型模型的初始排名和小型模型的后续重新排名之间的一致性来评估调用大型模型的需要。将大语言模型的特征提取能力与小型推荐模型的便利性结合起来,增强了大语言模型在设备上的实用性和准确性。
技术关键词
序列推荐 大语言模型 列表 特征提取能力 数据 端云协同 元素 计算方法 超参数 标签 服务器 决策 索引 计算机 通讯 动态 框架
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号