一种多模信息下的人体动作时序检测方法

本发明公开了一种多模信息下的人体动作时序检测方法，涉及视频理解及计算机视觉领域。本发明包括：搜集公开人体动作视频数据并完成预处理；生成文本提示序列并提取文本特征；构建多模态时序特征提取器提取多模态时空特征序列；构建多模态时序响应模块生成动作响应序列；构建动作提名生成器生成动作提名；构建多模态实例级动作检测模块实现人体动作检测。本发明通过上述技术方案，充分利用多模态数据有效信息，提升人体动作检测精度。