一种融合多模态大模型的智慧工地安全监测方法及其系统

本发明公开了一种融合多模态大模型的智慧工地安全监测方法及其系统，涉及建筑施工技术领域，其方法包括：基于Linux系统平台，利用Nginx服务器作为静态网站服务器结合摄像头请求视频流数据,客户端与Nginx服务器建立连接，依据配置文件进行配置，根据客户端的HTTP请求发送响应数据，对施工区域进行视频在线监控和图像识别实时处理。本发明通过详细的场景划分，及针对性安全指南制定，并结合基于视觉语言模型的少样本场景识别方法，可精准识别不同场景，确保监测贴合实际需求；通过人员物品佩戴检测模块与物品属性检测模块协同，实现了对人员防护装备和行为的深度、全面监测；深度估计与三维碰撞检测保证监测场景全覆盖。