一种模型训练方法、装置、设备、存储介质及程序产品

AITNT
正文
推荐专利
一种模型训练方法、装置、设备、存储介质及程序产品
申请号:CN202410983269
申请日期:2024-07-22
公开号:CN118865208A
公开日期:2024-10-29
类型:发明专利
摘要
本申请实施例公开了一种模型训练方法、装置、设备、存储介质及程序产品,该方法包括:提取训练视频的时序视频帧级特征和空间视频帧级特征;将时序视频帧级特征输入目标图文大模型中的时序对齐模块,得到时序对齐的视频帧级特征;将空间视频帧级特征输入目标图文大模型中的空间对齐模块,得到空间对齐的视频帧级特征;根据时序对齐的视频帧级特征,空间对齐的视频帧级特征以及训练视频的问答对对目标图文大模型进行训练,得到视频理解模型。采用本申请实施例能够提升视频理解模型的训练效率。
技术关键词
对齐模块 时序 图文 答案 模型训练方法 图像 编码 文本 计算机设备 计算机存储介质 视频理解方法 特征提取模块 语义 大语言模型 计算机程序产品 模型训练装置 处理器 社区平台 通信接口
系统为您推荐了相关专利信息
1
一种多模信息下的人体动作时序检测方法
文本 时序检测方法 序列 可见光 人体动作检测
2
基于深度学习的私域直播高峰期热点预测与内容调度方法
注意力 状态编码器 拓扑结构生成器 空间金字塔 节点
3
一种基于多维时序特征调制的复杂装备故障预测方法及系统
装备故障预测方法 时序特征 通道注意力机制 传感器特征 多尺度特征
4
一种风电场的风速功率数据的数据处理方法和装置
生成对抗网络模型 噪声样本 风速 随机噪声 数据分布
5
一种基于深度学习的企业虚拟管理方法、系统及终端
问答知识库 管理方法 企业 虚拟管理平台 员工
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号