摘要
本发明公开一种融合可信执行环境与差分隐私的大模型安全推理方法及系统,属于人工智能技术领域,所述方法包括:将大模型划分为嵌入层与核心处理层,嵌入层部署于本地客户端SGX2可信环境中,核心处理层部署在配备多GPU加速卡的远程服务器上;基于本地差分隐私技术,采用输出噪声最大值算法对用户原始输入数据进行文本混淆;将混淆后的文本数据通过嵌入函数进行向量映射;将嵌入向量加密传输至服务器GPU中,通过自注意力机制和前馈神经网络进行处理,生成预测结果并返回给客户端。本发明可以解决现有大模型推理中数据隐私保护与计算效率之间的矛盾问题。
技术关键词
可信执行环境
远程服务器
推理方法
词语
计算机程序指令
文本
核心
前馈神经网络
加速卡
客户端
解码器
计算机程序产品
差分隐私技术
拉普拉斯噪声
注意力机制
数据隐私保护
计算机设备
推理系统
可读存储介质
系统为您推荐了相关专利信息
空调水系统
模糊控制规则
空调机组表冷器
推理算法
模糊控制器
知识图谱推理方法
时序
位移编码器
实体
多层感知机
三维图像生成方法
三维网格模型
交叉注意力机制
三维图像特征提取
三维图像生成装置
情绪识别模型
驾驶员情绪识别
逻辑回归模型
信号特征
计算机程序指令
学习器
Stacking集成学习
浓度预测方法
计算机可读代码
监测站