一种面向教学的多模态交互式数字人助教生成方法

本发明公开了一种面向教学的多模态交互式数字人助教生成方法，属于人工智能教育技术领域，通过多模态输入(语音、文本、肖像图)，结合语义增强问答模型(SE‑QA)生成结构化答案；使用情感适配语音合成技术生成个性化语音；构建教学动作视频库，利用时空图卷积网络(ST‑GCN)提取动作特征，并通过时序卷积网络(TCN)生成视频，优化音唇同步与微表情；通过多模态评价与强化学习优化生成过程，实现“生成‑评价‑优化”闭环。本发明采用上述的一种面向教学的多模态交互式数字人助教生成方法，突破了传统数字人系统语义‑动作失配、情感表达单一等技术瓶颈，能显著提升知识传递效率与交互真实感，为智能教育工具提供了创新解决方案。