摘要
本公开实施例是关于一种会议纪要生成方法及装置、计算机程序产品、电子设备,涉及计算机技术领域,该方法包括:获取会议场景对应的多模态数据,并对所述多模态数据进行时空对齐,确定时空对齐的多模态数据;所述多模态数据包括会议视频、操作轨迹、会议语音、交互文本;基于多模态理解网络对时空对齐的多模态数据进行解析,并结合所述会议场景的发言人的角色标签,输出多模态语义组合信息;基于所述多模态语义组合信息构建所述会议场景对应的决策树,并基于所述决策树以及所述会议场景关联的知识图谱生成所述会议场景对应的会议纪要。本公开能够提高会议纪要的生成效率以及准确率。
技术关键词
会议纪要生成方法
会议场景
多模态
文本
发言人
语义
标签
生成结构化信息
图谱
计算机程序产品
协同注意力
网络
电子设备
图像
语音
数据获取模块
系统为您推荐了相关专利信息
数据分类分级
识别方法
引入注意力机制
Softmax分类器
客户敏感信息
情绪识别模型
嵌入特征
音频特征
图像序列数据
多头注意力机制