视觉关注点检测方法和系统

本发明属于计算机视觉领域，提供了一种结合屏幕内容的视觉关注点检测方法及系统。针对室外大屏场景交互，通过深度摄像机构建用户世界坐标系，在适应不同的摄像机位置和用户位置的情况下建立交互用户与屏幕的空间映射关系，并对用户视觉关注点和屏幕内容建立联系，针对分析屏幕内容过程，使用实例分割将屏幕图像分割成若干个实例，并获得这些实例的边缘坐标和类别。针对将视觉关注点和屏幕内容进行关联的过程，结合实例的类别判别用户视觉关注的对象，并对结合面部方位和头部姿态的视觉关注点定位做出修正，从而获得更精准的视觉关注点定位。