摘要
本发明公开一种辅助盲人就诊的医院内部定位、导航及避障系统,采用视觉SLAM算法、多视图立体匹配算法和全局优化算法Bundle Adjustment重建出医院内部的三维地图,采用PnP算法和RANSAC算法得到设备的三维坐标,采用大语言模型GPT‑4o解析盲人与医护人员的对话得到盲人的目的地,采用导航算法A*结合在云端服务器中该设备所在医院的提前建好的三维地图,制定出导航路径,实时播放给盲人,为盲人提供行动指导,采用实例分割算法YOLOv8‑seg检测和分割出前方障碍物,结合深度图像和坐标变换,得到前方障碍物信息,将障碍物位置播报给盲人。
技术关键词
辅助盲人
云端服务器
空间坐标信息
医院
障碍物
视觉SLAM算法
地图
大语言模型
实例分割算法
全局优化算法
IMU信息
语音
彩色图像
图像采集模块
导航算法
GPS模块
生成稀疏点云
系统为您推荐了相关专利信息
动态障碍物
加速度
预测控制系统
空间聚类算法
城市道路结构
不良反应风险
利奈唑胺
风险预测模型
患者
电子病历系统
风险评估模型
医院风险评估
医院数据管理系统
患者满意度调查
数据存储模块