摘要
本发明公开了同屏器跨平台触控指令的语义解析与映射方法,包括:S1:通过同屏器获取源设备的触控指令,所述触控指令包括触控位置、触控手势类型及触控时序信息;S2:基于目标设备的操作系统类型和应用场景,对所述触控指令进行语义解析,生成中间语义层指令,所述中间语义层指令包括操作逻辑、交互意图及目标控件标识;S3:根据目标设备的平台协议和交互规则,将中间语义层指令动态映射为目标设备的原生指令,所述原生指令适配目标设备的触控事件处理机制;S4:将原生指令发送至目标设备执行,并同步更新同屏器的显示界面与目标设备的显示内容。
技术关键词
映射方法
语义
指令
同屏器
事件处理机制
控件
操作系统
机器学习优化
支持多窗口
动态
界面
生成训练数据
支持跨平台
协议
手势
虚拟现实设备
神经网络模型
层级
场景