摘要
本发明公开了一种基于对偶跨模态信息解耦的多模态电力样本特征迁移方法、系统、电子设备及存储介质,应用于智能电网技术领域,包括:采用细粒度图像‑文本对齐策略进行视觉特征与语言特征的分层对齐,捕获区分性的多模态表征;基于双流注意力机制,对多模态数据进行增强特征提取;其中,双流注意力机制,包括:图像自适应注意力机制和文本引导注意力机制;通过对多模态数据进行跨模态信息解耦处理,分离获得表征通用语义的语义特征和表征模态特性的模态特定特征,并进行细粒度对齐重组处理,得到跨模态融合特征;将深度融合后的多模态电力样本特征迁移至电力系统的下游任务。本发明实现了多模态特征的理解和迁移能力的进一步提升及电力系统任务的高效运行。
技术关键词
注意力机制
迁移方法
视觉特征
跨模态融合特征
文本
语义特征
样本
上下文特征
图像
策略
对象
电力系统
模型剪枝
多模态
关键区域信息
参数
模态特征
系统为您推荐了相关专利信息
剪切板数据
图片
落盘方法
大语言模型
生成文本摘要
飞行状态数据
控制优化方法
深度强化学习
动态关联模型
交互式训练
时序预测模型
变量
序列
注意力机制
神经网络单元
特征提取模块
特征提取网络
注意力机制
多尺度结构
无监督学习