基于多模态大语言模型的云桌面系统管理方法及装置

本公开的实施例提供一种基于多模态大语言模型的云桌面系统管理方法及装置，云桌面系统并行运行有主容器和Sidecar容器，所述多模态大语言模型部署在本地用户终端，该方法包括：获取Sidecar容器实时采集的用户在云桌面中的多模态行为数据，多模态行为数据包括文本输入、操作日志、屏幕内容和语音输入；基于Transformer架构的多模态大语言模型对多模态行为数据进行跨模态融合分析；以及，基于多模态大语言模型的融合分析结果，生成个性化工作总结和工作效率优化建议，并识别敏感操作、异常行为和潜在安全风险。