摘要
本发明公开了一种基于强化学习人机协同桌面交互方法,包括以下步骤;步骤1:采集用户当前的眼动数据、操作数据、历史预测数据、任务标识和用户标识共同组成多模态状态输入;步骤2:使用步骤1采集到数据对用户下一时刻操作意图进行预测;步骤3:使用手协同策略对预测的意图进行过滤以防止干扰用户操作;步骤4:对过滤后的意图进行响应,保存用户历史操作,使用多阶段训练对多用户多任务场景进行适配。本发明通过预测用户的下一时刻的操作意图,提前帮用户做好准备将光标移至意图区域减少用户操作从而提升用户交互效率;并且本方法能适配于多人员和多任务场景。
技术关键词
桌面交互方法
人机协同
意图
序列
标识
电脑桌面
多任务
更新方法
调用操作系统
多模态
光标
场景
坐标
多阶段
多用户
眼动数据
策略
软件
系统为您推荐了相关专利信息
语义向量
油墨
自动生成方法
特征校验
文本区域识别
智能模型
皮尔逊相关系数
诊疗系统
神经网络算法
数据分析模块
动态瓶颈预测
多源运行数据
时间序列预测模型
长短期记忆网络
半导体
营销服务平台
转移概率矩阵
累计用电量
物联网技术
负荷预测模型