摘要
本发明公开了智能座舱多模态感知数据融合方法、系统、装置及介质,包括:获取目标座舱的视频图像信息和音频信息,对视频图像信息进行特征提取得到第一图像特征信息,并对音频信息进行特征提取到第一音频特征信息;对第一图像特征信息进行降噪处理、特征对齐以及特征图转化,得到第一特征图;对第一音频特征信息进行降噪处理、时域对齐以及特征图转化,得到第二特征图;对第一特征图和第二特征图进行时序融合,得到目标感知融合数据。本发明提高了智能座舱感知数据识别分析的效率以及智能座舱决策控制的准确性,从而提高了智能座舱的用户体验,可广泛应用于数据处理技术领域。
技术关键词
音频特征信息
数据融合方法
图像特征信息
智能座舱
双层长短期记忆网络
多模态
降噪模型
噪声图像
信号
视频
数据融合装置
数据融合系统
时序
先进先出队列
短时傅里叶变换
高斯混合模型
处理器
系统为您推荐了相关专利信息
实体
视频生成方法
轨迹
视频生成装置
信息显示设备
智能座舱
特征工程
画像
计算机可读指令
人机交互界面
鲜食甘薯
BP神经网络算法
数据融合方法
小波阈值降噪
加权融合算法
生成对抗网络
图像修复系统
编码向量
深度学习模型
图像特征信息
多模态数据融合
气象观测数据
计算机执行指令
数据融合方法
图像