基于大模型和机器人的零售方法、系统、装置和介质

本申请提供基于大模型和机器人的零售方法、系统、装置和介质，涉及智慧零售技术领域，方法包括：采用深度相机，拍摄获得零售场景的彩色图像和深度信息；采用大模型，解析用户输入的多模态信息，获得目标商品的属性信息；利用深度学习模型生成二维候选框并计算分类结果，再结合深度信息映射至三维坐标系获取定位坐标，进行三维分割和特征分析以优化分类精度，最终融合二维与三维分类结果确定目标商品，并根据定位坐标，控制机器人精准抓取目标商品完成结算。本申请有效提升了零售场景中商品识别的准确性和空间定位的精确度，有效解决了单一维度分类不准的问题，并增强了对复杂零售场景的适应性，减少了人工干预，提高了零售业务的工作效率。