一种融合图像结构语义与LLM认知驱动的码头人员风险预警方法和系统

本发明公开了一种融合图像结构语义与LLM认知驱动的码头人员风险预警方法和系统，提出了一种面向遮挡环境下小目标检测算法以检测人员和危险品位置，提出了面向复杂背景和小目标的船舶实例分割算法以检测船舶位置，构建基于大语言模型的人员风险评估及预警系统，基于述人员定位信息、码头输油设备定位信息、船舶定位信息，并基于ALoRA方法对PRGemma大语言模型进行微调，得到危险品码头作业人员风险指数及预警信息。以实现港口遮挡场景下或杂背景干扰下小尺度目标准确定位，提高码头人员风险预警准确度和识别效率。适用于码头作业场景特点。