基于AR眼镜分析与Transformer结合的体育健身辅助应用

本发明涉及体育健身辅助技术领域，具体涉及一种基于AR眼镜分析与Transformer结合的体育健身辅助应用，包括摄像头模块、传感器模块、AR眼镜、无线通信模块和处理模块；其中摄像头模块采集用户运动视频流，传感器模块同步记录加速度、角速度及方向数据，处理模块通过并行计算架构实时运行Transformer模型，AR眼镜采用波导光学技术将三维可视化指导信息叠加至真实场景；摄像头模块进行图像噪声清洗后卷积网络提取图像特征，特征归一化处理；传感器模块在低通滤波器除噪声后，滑动窗口提取时序特征，特征归一化处理；2个特征融合拼接，基Transformer进行时序建模，输出动作行为，与标准动作模板计算，提出建议并显示在AR眼镜中，记录锻炼数据反向输入给Transformer模型进行记录。