一种基于端侧人工智能的多模态鸟类监测方法及系统

本发明公开了一种基于端侧人工智能的多模态鸟类监测方法及系统，涉及生态监测与人工智能技术领域，方法包括：利用部署在监测节点的边缘设备实时采集鸟类声纹信号和图像流，并进行本地预处理；利用声纹识别模块基于预处理后的鸟类声纹信号提取鸟类声纹特征；利用图像识别模块基于预处理后的鸟类图像流提取精细化的鸟类图像特征；利用多模态融合模块将鸟类声纹特征和鸟类图像特征进行融合和特征分类，并使用机器学习线性回归方法获得影像中鸟类定位信息；将分类结果及鸟类定位信息进行本地存储或通过低功耗通信协议传输至中心平台。本发明解决了传统监测方案的高延迟、高误检率问题，适用于无网络覆盖的野外环境，具备低功耗、高精度的优势。