数据与机理融合的工控多模态生成式预训练模型构建方法

本发明公开了一种数据与机理融合的工控多模态生成式预训练模型构建方法，收集大量工业时序信号，以滑窗切割的方式划分出一定数量的样本，各个样本进行标准化预处理；以机理知识为依据，对各时序样本进行文本描述，进而形成大量的时序信号‑文本对并构建数据集；构建能使信号与文本多模态表示对齐的双编码器，所述双编码器包括信号编码器与文本编码器；构建在“文本+信号‑>信号”范式下的工控多模态生成式预训练模型。在保证文本描述的准确性和全面性的同时，减少文本标注成本。该方法通过表示对齐赋予信号显式的语义，从而支持后续模型中信号数据与文本知识的多模态深层次融合。使得预训练模型具有在下游任务上展现优异性能的潜能。