模型运算优化方法、产品、设备及介质

AITNT
正文
推荐专利
模型运算优化方法、产品、设备及介质
申请号:CN202410704399
申请日期:2024-06-03
公开号:CN118277133B
公开日期:2024-07-30
类型:发明专利
摘要
本申请公开了模型运算优化方法、产品、设备及介质,涉及数据处理技术领域,包括:监测针对用户自定义算子的目标广播请求;所述目标广播请求中携带有所述用户自定义算子和至少两个输入张量;通过调用智能问答模型或深度学习网络模型的深度学习框架完成对CUDA设备的调用,以分别对各输入张量进行遍历,并确定与遍历结果对应的用于通过乘法及减法进行偏移量余数计算的目标参数;根据利用目标参数分别确定的各输入张量的偏移量从对应的张量存储空间中提取相应的元素值,并基于计算逻辑关系式对提取到的元素值进行相应的广播,得到对应的张量广播结果。本申请能够降低对除法和取余操作的依赖,提高偏移量计算的速度以及张量广播的效率。
技术关键词
运算优化方法 自定义算子 深度学习网络模型 问答模型 深度学习框架 元素 参数 索引 存储计算机程序 数据处理技术 逻辑 计算机程序产品 处理器 可读存储介质 存储器 电子设备 语句 指令
系统为您推荐了相关专利信息
1
一种基于高分辨率高光谱遥感影像的建筑物属性提取方法
高光谱遥感影像 属性提取方法 高分辨率卫星影像 深度学习网络模型 建筑物
2
基于自适应时频特征协同的脑电信号特征提取方法及系统
电信号特征提取 特征提取模型 时间域 频域特征 深度学习网络模型
3
一种表格问答方法、问答系统及存储介质
大语言模型 问答方法 答案 摘要 数据转换模块
4
一种基于Mamba和Unet模型的红外光谱预处理方法
光谱预处理方法 输出特征 分支 基线 长光程气体
5
智能问答方法、装置及存储介质
智能问答方法 问答模型 答案 检索算法 神经网络模型
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号