基于低秩自适应增强的多模态大模型进行视觉任务处理的方法和装置

本发明提供一种基于低秩自适应增强的多模态大模型进行视觉任务处理的方法和装置，涉及数据处理技术领域，所述方法包括：接收视觉应用发送的多个视觉任务请求以及所述多个视觉任务请求中每个视觉任务请求对应的视觉输入数据；通过编排器将所述多个视觉任务请求动态调度为多个批次的处理序列，并确定每个批次的视觉输入数据使用的低秩适配器的推理模式；将所述每个批次的视觉输入数据以及对应的低秩适配器输入至目标多模态大模型中，通过自适应分片矩阵乘法算子ATMM对视觉输入数据和对应的低秩适配器的分解矩阵进行动态分片计算，得到所述每个视觉任务请求对应的响应结果。通过本发明提供的方法，满足多样化的视觉任务需求。