摘要
本发明提供一种基于埋地泄漏电缆及多模态传感的行为识别方法及系统,涉及动作识别技术领域,包括:添加泄漏同轴电缆,设置多模态传感器阵列,获取射频信号并进行相位信息提取,确定目标移动速度,通过视频数据提取光流特征、外观特征和骨架特征,对音频数据进行频域特征提取,生成多模态异构图网络;对节点的特征表示进行更新,得到第一特征,构建时空行为表示,进行序列学习,确定长时依赖关系,生成不同尺度的时空行为特征;将时空行为特征映射至行为类别空间,得到目标行为概率分布,对行为类别进行判定并生成行为识别结果序列,进行关键行为提取并计算时间戳,若存在异常行为,则触发警报并绘制时空行为轨迹图。
技术关键词
泄漏同轴电缆
多模态传感器
焦点损失函数
频域特征提取
梅尔频率倒谱系数
骨架特征
时序特征
校准机制
泄漏电缆
光流特征
网络
节点特征
序列
射频
注意力机制
异构
系统为您推荐了相关专利信息
信号解调方法
注意力
多时间尺度
生成式对抗网络
双向长短期记忆网络
远程监护系统
时序
药物
动态时间规整
DTW算法
注意力神经网络
高维特征向量
故障预测方法
前馈神经网络
序列
语音交互系统
语音识别模型
显示器
麦克风阵列
指令
异常数据
企业交易数据
估值算法
计算机可读指令
分类策略