一种多模态视频信息监测方法、装置、计算机设备及介质

本发明提供了一种多模态视频信息监测方法、装置、计算机设备及介质，属于信息识别领域，该方法包括：构建多模态敏感信息识别模型；获取目标视频以及目标视频对应用户的历史敏感信息；确定敏感信息的图像类型，根据该图像类型提取目标视频的第一图像帧；提取出目标视频的文本信息和音频信息，并通过该历史敏感信息调整SE中的模态权重；将该文本信息、第一图像帧以及音频信息输入至多模态敏感信息识别模型，得到敏感信息的识别结果。首先提取出与敏感信息相关的图像帧，减少目标视频中的无效信息，其次通过历史敏感信息记录调整模态权重，提高了对敏感信息识别的准确性，然后再对多种模态信息的特征进行融合，进一步提高了对多模态敏感信息的识别。