摘要
本申请涉及一种智能眼镜的控制方法、装置、计算设备和系统。所述方法包括:智能眼镜获取用户发出的语音指令,并将语音指令转换为目标文本指令;智能眼镜确定目标界面截图,并将目标界面截图和目标文本指令进行加密后发送至云端服务器;云端服务器对加密传输信息进行解密,确定目标界面截图和目标文本指令,并通过云端多模态大模型,根据目标界面截图和目标文本指令确定操作步骤;云端服务器将操作步骤组装为标准化指令序列,将标准化指令序列发送至智能眼镜;智能眼镜根据所述标准化指令序列确定指令操作信息,并执行指令操作信息。上述方案,能够提高AR眼镜控制方法的高智能化程度和适应性。
技术关键词
智能眼镜
多模态
云端服务器
指令
文本
样本
序列
控制系统
意图
操作界面
动态规划算法
图标
控件
解密
加密
AR眼镜
策略