一种基于短视频的敏感信息识别预警方法、系统及介质

本发明提供一种基于短视频的敏感信息识别预警方法、系统及介质，涉及信息识别技术领域，包括：将音频数据转换为文本数据；提取图像特征和文本特征，并进行匹配关联，形成多个图文特征簇；获取各图文特征簇之间的重合度，并转换为每个图文特征簇内各特征重合占比，对图文特征簇中的重合占比高的图像特征和文本特征进行降权，并进行特征融合；根据重合度对图文特征簇从小到大排序，确定关键特征簇序列；将融合后的特征依次输入到敏感信息识别模型进行识别，直至识别到敏感信息后停止。该方法通过将短视频所提取的多模态数据进行时序上的特征关联，以及重复特征数据降重，从而放大敏感数据的隐蔽性特征信息，提升判断和识别的准确性。