基于先验规则和多模态大模型的移动端智能体信息处理系统

本发明公开了基于先验规则和多模态大模型的移动端智能体信息处理系统，涉及人工智能技术领域，包括图标准确定位与识别模块，通过不同层次的识别方法，准确定位和识别界面中的图标，并推断图标的功能；执行效率提升模块，通过任务拆解和优化路径设计，提升执行速度；特定应用的操作优化模块，用于记录每个界面元素的位置信息、大小及其对应的图标功能，构建特定应用的导航路径库，并优化周期性任务的执行路径；导航和任务数据收集更新模块，负责收集并更新导航路径和任务执行的动态数据，并持续进行自学习和优化。因此，采用上述方法，能够实现精确的图标定位与功能识别，提高执行效率并降低计算资源消耗，同时能够应对界面变化并持续优化。