摘要
本申请公开了一种多模态数据生成方法、模型训练方法及相关产品。该方法包括:获取目标提示词,目标提示词包括生成目标多模态数据的描述,目标多模态数据包括第一模态的第一数据和第二模态的第二数据,第一模态与第二模态不同;将目标提示词输入至目标生成模型,获得目标生成模型生成的第一中间数据,第一中间数据包括第一数据和第二数据的嵌入向量;基于嵌入向量,确定目标多模态数据中的第二数据。基于该多模态数据生成方法可提高获得多模态数据中的单一模态的数据的效率。
技术关键词
多模态
数据生成方法
数据生成装置
模型训练方法
模型训练装置
计算机程序代码
计算机程序产品
电子设备
处理器
可读存储介质
指令
编码器
文本
风格
图像
存储器
参数
标识
系统为您推荐了相关专利信息
交互系统
多模态
微动特征
多尺度特征提取
交互内容
信号识别方法
注意力机制
多模态
多通道
时序特征
视频段
检索方法
音频分类技术
光学字符识别技术
视频帧