摘要
本发明公开了智能座舱多模态感知数据融合方法、系统、装置及介质,包括:获取目标座舱的视频图像信息和音频信息,对视频图像信息进行特征提取得到第一图像特征信息,并对音频信息进行特征提取到第一音频特征信息;对第一图像特征信息进行降噪处理、特征对齐以及特征图转化,得到第一特征图;对第一音频特征信息进行降噪处理、时域对齐以及特征图转化,得到第二特征图;对第一特征图和第二特征图进行时序融合,得到目标感知融合数据。本发明提高了智能座舱感知数据识别分析的效率以及智能座舱决策控制的准确性,从而提高了智能座舱的用户体验,可广泛应用于数据处理技术领域。
技术关键词
音频特征信息
数据融合方法
图像特征信息
智能座舱
双层长短期记忆网络
多模态
降噪模型
噪声图像
信号
视频
数据融合装置
数据融合系统
时序
先进先出队列
短时傅里叶变换
高斯混合模型
处理器
系统为您推荐了相关专利信息
智能座舱
数据同步
同步调度器
决策
服务编排技术
卷积网络模型
数据融合方法
电网设备
样本
计算机设备
大数据融合系统
异构
扩展卡尔曼滤波
无人船
可视化模块
图像显示方法
显示图像数据
原始图像数据
车辆行驶状态
检测显示屏