摘要
本公开提供一种聚类方法、聚类模型训练方法及相关装置。上述聚类方法,应用于聚类模型,上述聚类模型包括N个级联的码本比较模块且每一级码本比较模块对应N层码本空间中的一个码本,包括:将由多模态预训练模型输出的多模态表征信息输入所述聚类模型;在所述聚类模型的各个码本比较模块,分别确定其对应码本中与输入特征距离最近的码字,将其作为所述码本比较模块对应的码字,并将所述输入特征与所述码字之间的差值特征作为下一级码本比较模块的输入特征;以及基于上述N个级联的码本比较模块对应的码字确定上述多模态表征信息对应的隐形分类标签。
技术关键词
码字
聚类模型训练方法
多模态
模块
级联
聚类方法
预训练模型
标签
代表
计算机程序指令
输入接口
表达式
计算机程序产品
样本
处理器
重构
存储器
系统为您推荐了相关专利信息
资源调控方法
机器学习算法
时序
智能电表终端
指令
检测平台
活动盖板
待测模块
检测位
半导体测试设备
风湿病康复
智能评估系统
分类系统
结构方程模型
协方差矩阵
中小型无人机
航迹预测
防撞系统
飞行模型
数据存储模块
自动驾驶系统
交通路口视频
智能驾驶车辆
行人识别
行人检测