多模态模型与深度学习快速生成GUI代码方法及系统

本发明公开了一种多模态模型与深度学习快速生成GUI代码方法及系统，涉及图形用户界面设计技术领域，包括以下步骤：接收多模态输入，并进行特征提取获得多模态特征；采用多模态融合注意力网络对多模态特征进行融合获得融合特征；采用基于Transformer的代码生成模型根据融合特征预测GUI代码；检测目标平台环境选择相应的代码模版将GUI代码封装为可复用组件；实时渲染可复用组件生成GUI布局，并对GUI布局进行交互调试，生成反馈信号；根据反馈信号利用增量学习策略和强制学习机制优化代码生成模型；优化的代码生成模型更新GUI代码。本发明融合多模态输入信息生成GUI代码，并提供交互式编辑和匹配目标平台的代码调整，提高GUI代码的生成效率和适用性。