一种机器学习与深度学习结合的免校准眼动追踪系统及方法

本发明提出了一种机器学习与深度学习结合的免校准眼动追踪系统及方法，该系统包括以下模块：预校准模块，用于通过近眼摄像头和红外光源采集用户眼部的近眼图像，提取瞳孔中心坐标与角膜反射点坐标，并基于提取的所述瞳孔中心坐标与角膜反射点坐标计算用户个性化kappa角；决策器模块，采用AdaBoost集成学习算法，根据计算获得的所述kappa角对用户进行分类，输出对应的权重组合；深度学习模块，用于接收输出的所述权重组合及实时近眼图像，通过卷积神经网络与残差连接结构，预测用户注视点的坐标。本发明在保障精度的同时，极大增强眼动追踪技术的应用灵活性与用户友好度。