基于多模态非语言交互的口腔健康管理系统及方法

本公开提供了基于多模态非语言交互的口腔健康管理系统及方法，涉及多模态信号处理技术领域，获取用户在口腔健康场景中的多模态非语言交互信号，对多模态非语言交互信号进行特征提取，得到各模态信号的特征向量；将各模态信号的特征向量进行跨模态对齐与自适应权重计算，生成经平滑的综合特征向量；基于贝叶斯后验的TP‑BID模型实现实时意图判别，识别用户的基本交互意图，实现口腔健康管理交互流程；其中，采用基于贝叶斯后验的TP‑BID模型实现实时意图判别，内置转移矩阵缓冲区动态维护式的先验，利用张量化Softmax计算后验分布，生成意图ID与置信度对。