摘要
本发明公开了基于大模型与界面联合驱动的终端控制系统及控制方法,控制系统包括外设智能体载体、指令解析与任务生成模块、终端界面状态采集与反馈模块、任务执行控制模块,所述外设智能体载体包括输入感知单元、连接模块、处理芯片;本发明的终端控制系统及控制方法支持多模态输入的自然交互方式,提升用户体验,利用外设解耦控制逻辑与终端资源,降低本地计算负担同时结合大语言模型与界面状态,实现灵活、智能的任务规划,可跨应用执行复杂任务链,提升移动终端的自动化能力;本发明终端控制系统结构开放,适用于耳机、手表、背夹、笔等多种形态。
技术关键词
终端控制系统
界面
多模态交互
指令
大语言模型
唤醒终端设备
控制模块
终端控制方法
载体
语音
语义结构
阶段
程序
图像
通信接口
移动终端
背夹