摘要
本发明是一种基于视频放大技术与多模态融合模型的无创内皮功能检测方法,该方法首先对手指区域的数据进行图像增强和去噪、手指区域检测、裁剪、提取出ROI区域等一系列预处理操作,提高内皮数据的质量,然后搭建视频放大网络,提取RGB图像与红外图像的空间颜色特征并进行放大。本发明与常规依靠传感器或者生化检测内皮功能的方法相比,具有无创,效率高且高度自动化的特点,与传统的图像特征提取与分类网络相比,利用视频放大技术放大手指区域的颜色特征,并结合RGB图像与红外图像,分别提取这两个图像的颜色特征,使用数据融合算法(深度学习中的多通道融合)将两种模态的数据整合细化,提取出综合特征数据,具有更好的鲁棒性。
技术关键词
功能检测方法
残差模块
积层
视频
融合网络结构
颜色
模态特征
图像增强
数据融合算法
图像特征提取
边缘算法
可见光图像
追踪算法
分类网络
信号分析
指数