摘要
本申请公开了一种人机协同教学中孤独症儿童课堂参与度多模态评估方法、系统及设备,涉及教育人工智能技术领域,该方法包括:对多模态生理情感数据进行特征分析,得到多模态特征;识别当前教学场景,并利用专家干预策略规则库对当前教学场景下每一模态特征进行权重分配,得到当前教学场景下的各模态特征的权重;基于多模态特征及其权重,利用训练好的深度学习模型实时评估孤独症儿童的课堂参与度;根据多模态特征和课堂参与度,利用教育干预策略库检索干预策略,实时对课堂参与度与干预策略进行可视化展示。本申请提高了孤独症儿童参与度识别的准确性、客观性和时效性,实现了课堂参与度和干预策略的可视化,提高了干预策略的针对性。
技术关键词
孤独症儿童
教学场景
多模态特征
人机协同
深度学习模型
专家规则库
多模态生理
深度图像数据
策略
分类规则
视频流
语音特征
深度学习网络
专家知识库
注意力
系统为您推荐了相关专利信息
交通流预测方法
注意力神经网络
道路交通流数据
交通图
交通流量信息
肾透析治疗装置
生物反应器
监测模块
成分分析仪
数据采集模块
多模态
上报方法
机器学习模型
深度学习模型
图片
高层语义特征
视觉定位方法
教学
视觉特征
多模态特征