摘要
本发明提供一种面向间歇性失智老人的防走失多模态危险评估与智能预警系统,涉及电子信息和计算机技术领域,本申请中构建了一个模拟老人走失过程的小规模多模态数据集,包括第一视角场景图像和GPS位置信息。该数据集完成了场景图像与GPS定位信息的匹配,并针对不同场景和位置信息,制作标定了该时刻下目标危险状态等级标签。此外,本申请中提出了一种基于场景‑GPS多模态危险状态评估网络模型,该模型将目标第一视角场景信息和老人出行时间、速度、方向、距离信息特征进行融合,实现多维度准确评估目标危险状态。此外,为了实现一维GPS信息与二维场景图像信息的维度对齐,首次提出树结构语义地图编码器。
技术关键词
智能预警系统
失智老人
多模态
老年人出行
语义地图
特征提取模块
场景特征
智能头盔
智能摄像头
图像
特征提取网络
视角
编码器
轨迹特征
GPS模块
数据