一种面向大语言模型的GUI页面标记语言及系统

本申请涉及一种面向大语言模型的GUI页面标记语言及系统，其特征在于，该系统包含：“页面内容概括”的文本描述模块单元、“是否为前景图层&前景种类”的文本描述模块单元，“模块/组件”的文本描述模块单元，以及模块/组件内“具体元素和元素间关系”的文本描述模块单元，共四个模块单元,四个模块单元的输出以自然语言形式拼接在一起，共同构成面向大语言模型的GUI页面标记语言；该技术方案通过对GUI页面信息进行计算，获取到了准确的元素位置信息，弥补了当前大模型/跨模态大模型无法准确获取页面元素位置的问题。