摘要
本发明提出了一种基于单个事件相机与多个RGB相机生成光场事件流的方法,旨在降低高帧率RGB光场视频(RGB‑LFV)的制作成本,增强虚拟现实(VR)中的沉浸式视频体验。现有的RGB‑LFV存在帧率低、运动模糊等问题,为解决此问题,本发明提供了一种框架,只使用一个事件相机,配合多个RGB相机,通过空间‑角度卷积、卷积长短时记忆网络及Transformer模型,有效提取RGB‑LFV的角度特征、时间特征和长距离依赖,生成光场事件流,从而提高RGB‑LFV的帧率,降低高帧率RGB‑LFV的制作成本,改善虚拟现实中的用户体验。
技术关键词
事件相机
事件流
沉浸式视频
注意力模型
时间变化特征
高时间分辨率
网络
低成本
运动
框架
关系
数据
系统为您推荐了相关专利信息
智能审核系统
依存句法分析
大语言模型
一致性检测
理赔案件
数据汇聚方法
多模态
构建知识图谱
交叉注意力机制
异构
特征金字塔网络
绑扎钢筋
三通道
机器学习训练
注意力模型
代码摘要生成方法
多模态特征融合
语句
注意力机制
摘要生成系统