基于多模态融合的轻量化输电终端隐患识别方法、装置、电子设备及存储介质

AITNT
正文
推荐专利
基于多模态融合的轻量化输电终端隐患识别方法、装置、电子设备及存储介质
申请号:CN202411110611
申请日期:2024-08-14
公开号:CN118627021B
公开日期:2024-11-05
类型:发明专利
摘要
本发明属于输电通道智能识别技术领域,具体涉及一种基于多模态融合的轻量化输电终端隐患识别方法、装置、电子设备及存储介质。该方法包括:获取输电终端的隐患图像数据及现场对应的环境信息,构建图像文本数据集;基于swin transformer、bert及self‑attention分别建模教师模型和学生模型,并利用图像文本数据集训练教师模型,再利用训练好的教师模型蒸馏学生模型;对蒸馏得到的学生模型进行后量化处理,得到适配于终端设备平台的轻量化输电终端隐患检测模型,用于输电终端的隐患识别。本发明利用输电智能终端采集的多模态信息,提高输电终端设备智能巡检的效率,有效降低输电事故发生的风险。
技术关键词
分支 文本 教师 跨模态 学生 轻量化卷积神经网络 识别方法 多模态 蒸馏 嵌入特征 对齐模块 视觉特征 机器可读存储介质上存储 注意力机制 终端设备智能 图像
系统为您推荐了相关专利信息
1
产品推荐模型的训练方法、产品推荐方法
关键词推荐 产品推荐方法 预测类别 分类模型识别 文本
2
一种基于多模型协同的表格检测结构化输出方法、装置设备和存储介质
结构化输出方法 多模型协同 坐标 大语言模型 表格识别技术
3
一种多版式合同要素提取方法、装置、设备、介质及产品
答案 关键词 文本 样本 初始聚类中心
4
一种基于大模型的代码智能任务性能提升方法
性能提升方法 样本 语义 分类器 梯度提升树
5
一种高速公路异常事件类型识别与位置估计方法
位置估计方法 交通流参数 异常事件 交通流特征 路段
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号