音唇同步检测方法和装置、电子设备、存储介质

首页 AI资讯 AI技术研报 AI监管政策 AI产品测评 AI商业项目 arena全球大模型排行榜 AI产品热榜 AI 源力市场 AI新闻日报

正文
推荐专利
音唇同步检测方法和装置、电子设备、存储介质
申请号:CN202511288882
申请日期:2025-09-09
公开号:CN120932633A
公开日期:2025-11-11
类型:发明专利
摘要
本申请提出的音唇同步检测方法和装置、电子设备、存储介质,涉及人工智能技术领域,适用于金融科技领域及医疗健康领域。该方法包括:获取目标音视频数据,目标音视频数据包括目标混合音频和目标人脸视频序列;对目标混合音频进行音频编码,得到目标混合音频特征;通过目标语音编码模型对目标混合音频进行语音编码,得到目标说话人多模态特征;对目标人脸视频序列进行视觉编码,得到目标视觉特征;根据目标混合音频特征、目标说话人多模态特征和目标视觉特征进行特征融合,得到目标音唇特征;对目标音唇特征进行音唇同步分类,得到音唇同步类别。本申请能够降低音频中的噪声对音唇同步检测的不良影响,提高了音唇同步检测的准确性。
技术关键词
模态特征 语音编码 音频特征 去噪模型 样本 视觉特征 语音特征 重构 音唇同步检测装置 音视频 人脸 融合特征 音频编码器 上下文特征
添加客服微信AITNT178,进AITNT官方交流群
沪ICP备2023015588号