基于全景点云模型的导购机器人自主交互系统及方法

本发明公开了基于全景点云模型的导购机器人自主交互系统及方法，涉及人工智能和机器人技术领域，预制模型模块将用户导入的三维模型转换成点云模型；全景点云模块获取点云图像并进行场景重建得到全景点云图；指令分析模块采集多模态输入，并进行数据处理和多模态语义分析后，生成交互指令；决策规划模块将全景点云图和点云模型进行配准，以及结合交互指令规划导购机器人的路径和交互方式；运动执行模块根据路径和交互方式，执行对应的交互动作。本发明能够通过全景点云完全覆盖商品信息，环境建模精度提升至毫米级，提升了动态环境感知能力，提高导航定位精度，提升了多模态语义识别准确率，减少了多模态交互响应时间。