摘要
本发明涉及金融、医疗健康及人工智能技术领域,提供一种基于光线模拟的多角度图像生成方法、装置、设备及介质,将与Raymap模态对应的Adapter模块插入至基座模型进行微调,以引入Raymap作为新模态,并通过轻量级Adapter进行微调,辅助实现低计算成本、高质量、多角度地图像生成,Adapter模块即插即用,并不改变原有模型,因此也具有较强的可迁移性;利用Adapter模块对初始图像进行Raymap模态模拟及编码,以对图像生成过程进行多视角引导;利用Adapter模块对引导特征及初始图像进行特征融合,并基于基座模型对融合特征进行处理,使模型能够捕捉图像的视角信息,从而生成高质量的多角度图像。
技术关键词
融合特征
多角度
生成指令
模块
基座
图像生成装置
注意力
多模态
计算机设备
编码
可读存储介质
微调单元
人工智能技术
医疗健康
射线
模拟单元
相机
多视角
系统为您推荐了相关专利信息
振荡器控制
逆变器控制方法
平衡电网
电压
PLL锁相环
图像块
特征提取网络
银行卡号识别方法
数据
多头注意力机制
识别神经网络
电梯轿厢
特征提取网络
异常对象
损失率