摘要
本申请提供了一种基于聋哑人出行辅助视觉眼镜的控制方法、设备及介质,属于辅助视觉技术领域。该方法包括:获取当前第一图像信息,根据所设手势识别模型,检测是否存在手势动作。若是,则根据所设手势识别模型,识别当前第一图像信息,提取得到单一孤立词信息,按照时间序列,逐一将孤立词信息添加至缓存环形队列。当孤立词信息的数量大于所设数量阈值时,则对应读取当前存储文本中存储的上下文信息。根据所设语义整合大模型,对孤立词信息和上下文信息进行处理,捕捉语境信息,根据语境信息和上下文信息,对孤立词信息进行语义整合,显示得到的输出语句。能够提高数据采集准确率、手语识别翻译准确性和使用者的使用体验感。
技术关键词
光波导显示模组
手势识别模型
图像采集器
语音识别模块
手语识别翻译
语句
文本
语义
眼镜
视觉
输出特征
车辆
队列
镜框
可读存储介质
置信度阈值