摘要
本发明公开了一种吞咽造影视频微动作识别与定位方法及电子设备,其中方法包括:确定吞咽造影视频中的解剖学关键点并提取关键点序列,获取喉部的空间位置和运动趋势,为微动作识别与定位提供结构化指导;提取吞咽造影视频的外观特征;将关键点序列与外观特征进行融合,通过多模态信息互补提升微动作识别与定位模型对细粒度动作的辨别能力;设计动作分类与定位的联合优化策略,预测微动作类别及其时序边界,实现吞咽微动作的精准识别与定位。本发明过融合视频时序特征与解剖学关键点序列信息构建统一分析框架,利用关键点序列引导模型聚焦关键区域和时段,进而实现精准的微动作识别与定位。
技术关键词
定位方法
视频
联合损失函数
多模态信息
序列特征
滑动窗口
吞咽功能评估
时序
构建光流场
交叉注意力机制
表达式
定位关键点
电子设备
RGB特征
图像识别算法
更新模型参数
随机梯度下降
系统为您推荐了相关专利信息
无线通信天线
波束成形
动态响应模型
主波束
抗干扰方法
全景视频
监控相机
监控设备信息
画面
全景监测系统