摘要
本申请公开了一种多模态数据传输方法、装置、设备及存储介质,涉及数据处理技术领域,包括:基于异步非阻塞IO架构进行多模态的同步数据采集,并记录采集时间戳;对数据采集结果中各模态的初始数据分别进行预处理;基于预处理结果、预设多模态融合模型、当前业务需求特征确定各模态分别对应的目标注意力分数;基于目标注意力分数、预设业务规则及预设动态阈值机制,确定目标优先级队列及对应的数据传输策略;基于目标优先级队列和数据传输策略触发多模态数据传输操作,基于预设反馈机制监测到的数据传输情况确定当前是否触发模型更新。本申请解决了现有相关方案中多模态数据固定优先级策略导致的场景适应性差、异构数据重要性度量不精准的问题。
技术关键词
数据传输策略
多模态
数据传输方法
阈值机制
队列
预训练语言模型
交叉注意力机制
数据传输装置
重传策略
动态
数据处理技术
注册中心
数据采集器
数据采集模块
指标