摘要
本申请涉及一种多模态自适应英语口语训练方法、系统、设备及介质。所述方法包括:获取多模态数据;并提取所述多模态数据对应口语能力的特征,得到特征向量组;对所述特征向量组进行标准化处理,得到指标矩阵;将所述指标矩阵输入预训练的注意力机制模型,得到对应所述用户的口语能力画像;以所述口语能力画像为索引,匹配预设的培训资源库中对应的教学资源,得到模块化培训资源;所述模块化培训资源为对应所述用户的能力缺陷的课程;基于所述模块化培训资源,生成所述对应用户的训练方案。采用本方法能够引入多模态数据对用户的口语能力进行量化评估,有效判断学员口语对话过程中出现错误的原因。
技术关键词
多模态
注视点
手势
眼动数据
英语口语训练系统
语音
注意力机制
关键词
序列
校准特征
画像
资源库
交互特征
矩阵
加权特征
听觉
指标
系统为您推荐了相关专利信息
身份核查方法
多模态数据融合
面部特征
虹膜特征
识别虹膜
轮式巡检机器人
数据采集模块
理解系统
相机
生成自然语言
混合深度学习模型
浓度识别方法
图像特征向量
多波段
序列