摘要
本发明公开了一种自适应光场渲染的实时视差优化方法、介质及设备,包括:采集动态显微图像序列和辅助深度图;将数据输入时空特征提取网络的双流架构进行预处理并输出标准化的时空特征张量;将标准化的时空特征张量输入预训练的时空双流级联网络模型进行处理,并输出初始视差图;输入显微镜光学参数和初始视差图,利用AO‑Net处理并生成多项式系数,再利用光场传播模型,基于菲涅尔衍射原理优化多项式系数,输出校正光场数据;输入初始视差图,采用分级策略处理,输出优化视差图;输入校正光场数据与优化视差图,通过3D重建与物理约束,输出物理优化3D结构;输入物理优化3D结构与优化视差图,执行实时渲染。本发明解决了3D成像效果不佳的问题。
技术关键词
视差优化方法
特征提取网络
多项式
动态网格
深度图
显微镜
多视点立体图像
物理
校正
移动立方体算法
生成高对比度
BM3D算法
运动向量
立体图像数据
时序特征
编码视频流
解混技术