摘要
本申请提供了一种图像分割方法、装置、设备及存储介质,其中,方法包括:获取待分割图像及用户在待分割图像上的操作提示;将待分割图像和操作提示输入编码器组,通过编码器组分别生成图像特征和提示特征;通过分类模块获取图像特征和提示特征,提取提示特征中的词汇信息,使用分类模块输出图像特征属于该词汇信息类别的概率,当概率低于阈值时,调用对应知识图谱信息作为辅助特征;通过分割解释器获取图像特征、提示特征及辅助特征,并组合为融合特征,通过融合特征输出分割掩码以得到分割结果。本申请使用词汇信息作为文本提示消除原始长句大量冗余,引入分类模块预评估词汇信息是否能够在图像中划分出对象,大幅度提升了图像分割泛化效果。
技术关键词
融合特征
生成图像特征
图像分割方法
图像感兴趣区域
图谱
交叉注意力机制
图像分割装置
编码器模块
图像编码器
可读存储介质
机器学习模型
处理器
文本
邻居
存储器
系统为您推荐了相关专利信息
智能分析系统
大语言模型
企业
深度语义分析
知识图谱构建
多模态融合方法
视觉特征
矩阵低秩分解
文本
参数