摘要
本申请公开一种基于多模态融合的姿态估计方法、系统、电子设备及介质,方法包括:获取待检测图像、深度图像以及毫米波信号数据,其中,待检测图像包括至少一个目标物体;通过预设的深度神经网络对待检测图像以及深度图像进行特征投影,得到第一特征数据,并对毫米波信号数据进行特征投影,得到第二特征数据;将第一特征数据和第二特征数据输入编码器模块进行特征融合,输出聚合特征数据;通过解码器模块对聚合特征数据进行特征分离,得到类别向量以及关键点向量;根据类别向量以及关键点向量估计目标物体的目标姿态。在本申请实施例中,通过对不同模态的数据进行处理,提高人体姿态估计的准确性。
技术关键词
编码器模块
姿态估计方法
深度神经网络
多模态
投影模块
关键点
解码器
计算机可执行指令
图像采集装置
降维特征
姿态估计系统
物体
人体姿态估计
电子设备
信号
可读存储介质
数据获取模块
系统为您推荐了相关专利信息
健康管理系统
云端数据中心
通信模块
智能分析模块
数据分析模块
二维图像特征
神经网络模型
序列特征
分子
性质预测方法
折弯设备
协同控制方法
协同控制系统
设备运行状态数据
深度强化学习算法
应力传感器
区块链存证技术
孤立森林算法
锚杆
分级权限管理