摘要
本发明提供一种集成视觉与音频分析的婴幼儿睡眠监护方法及系统,属于智能家居和图像处理技术领域,包括下列步骤:S1:获取婴幼儿睡眠画面原始视频和原始音频,进行预处理,得到加密面部特征信息和声纹信息特征;S2:通过YOLOv8‑Pose网络模型识别婴幼儿的关键点坐标,对婴幼儿姿态进行识别分类,通过MiniResNetV2模型对婴幼儿音频进行分类;S3:通过多模态风险分析模型输出报警信息至远程监护终端,本发明可实现全天候、低延迟、高隐私保护的婴幼儿睡眠监护,在提升监护可靠性的同时,减少看护者负担。
技术关键词
婴幼儿睡眠监护
集成视觉
识别婴幼儿
面部特征信息
关键点
输出报警信息
轻量级通信协议
多模态
音频采集模块
视频采集模块
实时视频流
终端
重建人体
骨骼模型
加密
网络