基于多模态大语言模型提升盲人避障效率和安全性的方法

本发明公开了一种基于多模态大语言模型提升盲人避障效率和安全性的方法，包括如下步骤：步骤一，利用多种传感器获取环境数据，包括物体位置、距离和形状这些信息，进行环境感知与数据采集；步骤二，将传感器获取的数据进行预处理，包括数据清洗和特征提取，然后利用多模态大语言模型将不同传感器数据进行融合；步骤三，基于融合后的环境理解模型，使用大语言模型生成适应盲人感知的语言描述；步骤四，将语言描述通过语音提示或触觉反馈的方式传达给盲人用户。本发明的基于多模态大语言模型提升盲人避障效率和安全性的方法，采用大语言模型生成适应盲人感知的语言描述，能够让盲人更好的接收到导航信息了。