一种基于昇腾NPU的双模态目标检测系统及部署方法

本发明涉及计算机视觉技术领域，具体涉及一种基于昇腾NPU的双模态目标检测系统及部署方法，本发明通过在YOLOv8模型的input层增加两路输入并引入fusionblock融合模块，以及在颈部网络层融入BiFormer自注意力机制的BRA模块，使双模态能表征出更多目标信息特征，有效提升目标检测精度且保持原有推理速度。在Atals200IDK设备上使用AscendCLC++接口结合多线程编程，利用多级流水线实现并行优化和系统响应时间。同时采用生产者‑消费者模式，引入无锁队列减少系统延迟和资源开销。从而解决了现有的目标检测识别率较低和推理速度较慢的问题。