摘要
本发明公开了一种基于知识增强大模型的GUI自动生成方法及系统,包括:GUI知识抽取与建模技术,以实现文本、图标等设计元素的感知推理及设计属性的抽取,并构建GUI知识库;基于多模态表征的GUI检索方法,设计并引入多种GUI检索的计算维度,以精准获取所述知识库中的GUI实例;利用知识增强大语言模型进行GUI生成,所述生成过程包括内容补全、布局生成和结构优化模块,输出可编译的GUI代码;GUI辅助生成系统,可响应用户在设计界面中框选的GUI组件,自动执行所述GUI检索与生成流程,并将所述GUI代码自动编译并呈现在所述系统中。本发明有效提升了GUI的设计效率与质量。
技术关键词
自动生成方法
多模态
大语言模型
检索方法
多层次
关系
自动生成系统
元素
图谱
布局特征
建模技术
模块
美学
文本
实体
编码器
图标
度量
系统为您推荐了相关专利信息
数据集构建方法
医学影像特征
病变特征
分层特征
解剖学结构
进化方法
评分系统
机器学习模型
大语言模型
自然语言
车辆导航信息
灯光管理
多模态
交叉注意力机制
控制器模块