摘要
本发明公开了一种基于多模态AI分析的云端超声影像实时处理方法,数据采集,获取IMU数据及超声探头影像数据,IMU数据与超声影像帧通过时间戳同步,建立探头运动轨迹与影像空间位置的映射关系;数据预处理,对数据执行ROI区域提取;数据传输,基于提取数据,由边缘计算结点执行AI识别模块,判断优先传输关键解剖区域数据,传输采用双通道传输机制,通过控制流实时反馈的分析结果触发数据流动态调整传输策略;云端处理,对上传的数据在云端进行多态融合处理,基于构建的时空特征提取网络输出特征图,融合多模态图像输出加权融合特征,将融合特征输入全连接层,结合时序滑动窗口机制生成动态判断置信度曲线,基于置信度数值判断生成报告。
技术关键词
多模态
云端
融合特征
滑动窗口机制
特征提取网络
动态超声影像
探头
置信度数值
输出特征
时序
轻量化卷积神经网络
识别模块
扩展卡尔曼滤波算法
运动先验信息
超声影像数据
生成报告
模型部署方法
系统为您推荐了相关专利信息
视频理解方法
多模态特征融合
音频特征
图像特征向量
文本特征向量
融合算法
Sigmoid函数
特征金字塔网络
网络模块
通道
康复动作
穿戴式传感器
加权融合算法
肌肉电信号
多模态传感器
吹瓶机烘箱
数字孪生系统
无线收发模块
数据采集模块
自动控制系统