一种基于LLaVA多模态大模型的虫草识别方法及系统

本发明公开了一种基于LLaVA多模态大模型的虫草识别方法及系统，涉及计算机视觉、自然语言处理和人工智能技术领域，包括采集虫草数据，将虫草数据进行预处理；建立特征提取算法，对预处理后的虫草数据进行特征提取和融合；根据融合结果对虫草进行分类，生成虫草分类报告。本发明通过采集虫草多角度图像及配套文本，进行预处理提升数据质量，构建特征提取算法实现图文多模态融合，突破传统单模态识别局限，增强对细粒度特征的感知能力及复杂环境下的鲁棒性，最终对融合特征进行分类，生成结构化识别报告，提升识别准确率，实现自动化识别与结果反馈。